Node.Js中实现端口重用原理详解
本文介绍了Node.Js中实现端口重用原理详解,分享给大家,具体如下:
起源,从官方实例中看多进程共用端口
constcluster=require('cluster'); consthttp=require('http'); constnumCPUs=require('os').cpus().length; if(cluster.isMaster){ console.log(`Master${process.pid}isrunning`); for(leti=0;i{ console.log(`worker${worker.process.pid}died`); }); }else{ http.createServer((req,res)=>{ res.writeHead(200); res.end('helloworld\n'); }).listen(8000); console.log(`Worker${process.pid}started`); }
执行结果:
$nodeserver.js
Master3596isrunning
Worker4324started
Worker4520started
Worker6056started
Worker5644started
了解http.js模块:
我们都只有要创建一个http服务,必须引用http模块,http模块最终会调用net.js实现网络服务
//lib/net.js 'usestrict'; ... Server.prototype.listen=function(...args){ ... if(optionsinstanceofTCP){ this._handle=options; this[async_id_symbol]=this._handle.getAsyncId(); listenInCluster(this,null,-1,-1,backlogFromArgs);//注意这个方法调用了cluster模式下的处理办法 returnthis; } ... }; functionlistenInCluster(server,address,port,addressType,backlog,fd,exclusive){ //如果是master进程或者没有开启cluster模式直接启动listen if(cluster.isMaster||exclusive){ //_listen2,细心的人一定会发现为什么是listen2而不直接使用listen //_listen2包裹了listen方法,如果是Worker进程,会调用被hack后的listen方法,从而避免出错端口被占用的错误 server._listen2(address,port,addressType,backlog,fd); return; } constserverQuery={ address:address, port:port, addressType:addressType, fd:fd, flags:0 }; //是fork出来的进程,获取master上的handel,并且监听, //现在是不是很好奇_getServer方法做了什么 cluster._getServer(server,serverQuery,listenOnMasterHandle); } ...
答案很快就可以通过cluster._getServer这个函数找到
- 代理了server._listen2这个方法在work进程的执行操作
- 向master发送queryServer消息,向master注册一个内部TCP服务器
//lib/internal/cluster/child.js cluster._getServer=function(obj,options,cb){ //... constmessage=util._extend({ act:'queryServer',//关键点:构建一个queryServer的消息 index:indexes[indexesKey], data:null },options); message.address=address; //发送queryServer消息给master进程,master在收到这个消息后,会创建一个开始一个server,并且listen send(message,(reply,handle)=>{ rr(reply,indexesKey,cb);//Round-robin. }); obj.once('listening',()=>{ cluster.worker.state='listening'; constaddress=obj.address(); message.act='listening'; message.port=address&&address.port||options.port; send(message); }); }; //... //Round-robin.Masterdistributeshandlesacrossworkers. functionrr(message,indexesKey,cb){ if(message.errno)returncb(message.errno,null); varkey=message.key; //这里hack了listen方法 //子进程调用的listen方法,就是这个,直接返回0,所以不会报端口被占用的错误 functionlisten(backlog){ return0; } //... consthandle={close,listen,ref:noop,unref:noop}; handles[key]=handle; //这个cb函数是net.js中的listenOnMasterHandle方法 cb(0,handle); } //lib/net.js /* functionlistenOnMasterHandle(err,handle){ err=checkBindError(err,port,handle); server._handle=handle; //_listen2函数中,调用的handle.listen方法,也就是上面被hack的listen server._listen2(address,port,addressType,backlog,fd); } */
master进程收到queryServer消息后进行启动服务
- 如果地址没被监听过,通过RoundRobinHandle监听开启服务
- 如果地址已经被监听,直接绑定handel到已经监听到服务上,去消费请求
//lib/internal/cluster/master.js functionqueryServer(worker,message){ constargs=[ message.address, message.port, message.addressType, message.fd, message.index ]; constkey=args.join(':'); varhandle=handles[key]; //如果地址没被监听过,通过RoundRobinHandle监听开启服务 if(handle===undefined){ varconstructor=RoundRobinHandle; if(schedulingPolicy!==SCHED_RR|| message.addressType==='udp4'|| message.addressType==='udp6'){ constructor=SharedHandle; } handles[key]=handle=newconstructor(key, address, message.port, message.addressType, message.fd, message.flags); } //如果地址已经被监听,直接绑定handel到已经监听到服务上,去消费请求 //Setcustomserverdata handle.add(worker,(errno,reply,handle)=>{ reply=util._extend({ errno:errno, key:key, ack:message.seq, data:handles[key].data },reply); if(errno) deletehandles[key];//Givesotherworkersachancetoretry. send(worker,reply,handle); }); }
看到这一步,已经很明显,我们知道了多进行端口共享的实现原理
- 其实端口仅由master进程中的内部TCP服务器监听了一次
- 因为net.js模块中会判断当前的进程是master还是Worker进程
- 如果是Worker进程调用cluster._getServer去hack原生的listen方法
- 所以在child调用的listen方法,是一个return0的空方法,所以不会报端口占用错误
那现在问题来了,既然Worker进程是如何获取到master进程监听服务接收到的connect呢?
- 监听master进程启动的TCP服务器的connection事件
- 通过轮询挑选出一个worker
- 向其发送newconn内部消息,消息体中包含了客户端句柄
- 有了句柄,谁都知道要怎么处理了哈哈
//lib/internal/cluster/round_robin_handle.js functionRoundRobinHandle(key,address,port,addressType,fd){ this.server=net.createServer(assert.fail); if(fd>=0) this.server.listen({fd}); elseif(port>=0) this.server.listen(port,address); else this.server.listen(address);//UNIXsocketpath. this.server.once('listening',()=>{ this.handle=this.server._handle; //监听onconnection方法 this.handle.onconnection=(err,handle)=>this.distribute(err,handle); this.server._handle=null; this.server=null; }); } RoundRobinHandle.prototype.add=function(worker,send){ //... }; RoundRobinHandle.prototype.remove=function(worker){ //... }; RoundRobinHandle.prototype.distribute=function(err,handle){ //负载均衡地挑选出一个worker this.handles.push(handle); constworker=this.free.shift(); if(worker)this.handoff(worker); }; RoundRobinHandle.prototype.handoff=function(worker){ consthandle=this.handles.shift(); constmessage={act:'newconn',key:this.key}; //向work进程其发送newconn内部消息和客户端的句柄handle sendHelper(worker.process,message,handle,(reply)=>{ //... this.handoff(worker); }); };
下面让我们看看Worker进程接收到newconn消息后进行了哪些操作
//lib/child.js functiononmessage(message,handle){ if(message.act==='newconn') onconnection(message,handle); elseif(message.act==='disconnect') _disconnect.call(worker,true); } //Round-robinconnection. //接收连接,并且处理 functiononconnection(message,handle){ constkey=message.key; constserver=handles[key]; constaccepted=server!==undefined; send({ack:message.seq,accepted}); if(accepted)server.onconnection(0,handle); }
总结
- net模块会对进程进行判断,是worker还是master,是worker的话进行hacknet.Server实例的listen方法
- worker调用的listen方法是hack掉的,直接return0,不过会向master注册一个connection接手的事件
- master收到客户端connection事件后,会轮询向worker发送connection上来的客户端句柄
- worker收到master发送过来客户端的句柄,这时候就可以处理客户端请求了
分享出于共享学习的目的,如有错误,欢迎大家留言指导,不喜勿喷。也希望大家多多支持毛票票。
声明:本文内容来源于网络,版权归原作者所有,内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:czq8825#qq.com(发邮件时,请将#更换为@)进行举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。