Giter Club home page Giter Club logo

thinking-in-nodejs's Introduction

Thinking-in-Nodejs

1.Nodejs Eventloop,Timers and process.nextTick()

什么是Eventloop

Eventloop是允许Nodejs执行非阻塞I/O操作的核心架构,尽管事实上JavaScript是单线程-随时可能撂挑子给系统内核   因为大部分现代内核都是多线程,他们可以在后台并行处理多个任务。当其中一个任务完成,内核就告诉Nodejs,将其对应的回调callback放入轮询队列(poll queue),这个回调将会在一定时机被执行。下面将会把这些问题展开讨论。

Eventloop详解

当Nodejs启动的时候,会初始化Eventloop,处理提供的可能产生异步API调用、计划计时器,或者调用process.nextTick()的输入脚本,然后开始处理event loop   下面这张图简单的展示了eventloop的操作顺序

   ┌───────────────────────┐
┌─>│        timers         │
│  └──────────┬────────────┘
│  ┌──────────┴────────────┐
│  │     I/O callbacks     │
│  └──────────┬────────────┘
│  ┌──────────┴────────────┐
│  │     idle, prepare     │
│  └──────────┬────────────┘      ┌───────────────┐
│  ┌──────────┴────────────┐      │   incoming:   │
│  │         poll          |<─────┤  connections, │
│  └──────────┬────────────┘      │   data, etc.  │
│  ┌──────────┴────────────┐      └───────────────┘
│  │        check          │
│  └──────────┬────────────┘
│  ┌──────────┴────────────┐
└──┤    close callbacks    │
   └───────────────────────┘

Tips:每个方框可以看做是一个“阶段”  

每个“阶段”都有一个先进先出(FIFO)的回调队列要执行。而每个阶段都有其独特的方式,一般的,当event loop进入一个给定的阶段,他将会执行那个阶段定义的所有操作,然后执行那个阶段队列中的回调直到这个队列耗尽或者到达回调的最大个数。当队列耗尽或者回调执行个数到达限制,event loop将会移向下一个阶段,以此类推   由于任何的这些操作可能会调度更多的操作和新事件被轮询阶段(poll phase)处理  

阶段概览

  • timers 这个阶段执行被函数setTimeout()和setInterval()调度的回调  
  • I/O callbacks 执行几乎所有除timer、close、setImmediate()之外的回调
  • idle,prepare 只被内部使用  
  • poll 获取新的I/O事件,Nodejs在这里可能会阻塞  
  • check setImmediate()的回调在这个阶段被调用  
  • close callbacks 例如socket.on('close',...)
      在event loop每次运行期间,Nodejs会检查他是否在等待一些异步I/O或者timer,如果没有(异步I/O或者timer),则完全关闭event loop。

阶段详细介绍

timers  

定时器在给定回调后边指定了回调可能执行的时间阈值,而不是某个人期望回调执行的准确时间。定时器回调将会尽可能早的在其定义后的指定时间执行,无论如何,操作系统调度任务或者其他回调都可能会使定时器回调延迟执行。

Tips:从技术上说,poll阶段控制着何时定时器回调执行  

举个例子,你定义了一个定时器回调在100ms后执行,同时一个其他的异步读文件操作(耗时95ms)开始执行。代码大致如下

   const fs = require('fs');
   function someAsyncOperations(callback){
   //假设这读取文件耗时95ms
      fs.readFile('/data/file.js', callback);
   }
   //定时器开始时间
   const timeoutScheduled = Date.now();
   //定义定时器
   setTimeOut(() => {
      let diffTime = Date.now() - timeoutScheduled;
      console.log(`延迟执行时间为${diffTime}`);
   }, 100);
   someAsyncOperations(() => {
      let now = Date.now();
      while(Date.now - now < 10){
         //模拟执行时间10ms
      }
   });

当event loop进入poll阶段的时候,poll这个时候只有个空的队列(fs.readFile()还没有完成,因此回调还没有进入回调队列),event loop在最早的定时器时间阈值之前将会等待数毫秒。当过去95ms的时候,fs.readFile()完成了读取操作,他的回调(需耗时10ms)被添加到poll的执行队列中并被执行。经过10ms这个回调执行完毕,此时队列中没有其他的回调,所以event loop看到最早的timer定时器阈值到了后就绕回timer阶段去执行定时器的回调。这个代码示例中,定时器被定义到定时器回调被执行之间的时间是105ms。  

为了防止event loop在poll阶段饥饿,libuv(实现Node.js的event loop和所有平台异步行为的C语言库)在停止对更多事件轮询前设置了一个最大的轮询次数值(依赖系统)。  

I/O回调  

这个阶段执行一些系统回调诸如TCP类型的错误。例如,如果一个TCP的socket尝试连接的时候收到了ECONNREFUSED,一些*nix系统想要报告错误。这将在I/O阶段顺序执行。  

poll  

poll 阶段主要有两类函数:

  • 执行已经到时的定时器脚本  
  • 处理poll队列中的事件

当event loop进入poll阶段且没有计划定时器,将会发生如下两种情况之一:  

  • 如果poll队列不为空,event loop将会循环访问poll队列并同步执行其中的回调函数直到遍历完或者遍历数到达系统上限。 
  • 如果poll队列为空,则会发生下面两种情况之一:
  1. 如果脚本是用setImmediate()方法定义的,event loop将会结束poll阶段进入check阶段执行这些脚本。
  2. 如果没有用setImmediate()定义脚本,event loop将会等待poll队列中被加入回调,然后立即执行。   一旦poll队列为空,event loop将会检查已到达阈值时间的计时器。如果一个或更多计时器时间到达,event loop将会绕回timers阶段去执行这些计时器的回调。

check

这个阶段允许人在poll阶段完成后立即执行回调。如果poll阶段变得空闲并且脚本已经被setImmediate()入列,event loop就可能执行check阶段而不是继续等待。 setImmediate()实际上是一个运行在event loop独立阶段的特殊定时器,他在poll阶段完成后使用libuv的API调度回调执行。 通常的,当代码被执行,event loop最终会到达poll阶段等待连接、网络请求等的到来。无论如何,当setImmediate()定义了回调函数,并且poll阶段变为idle的时候,event loop将会结束等待并去执行check阶段。

close callbacks  

如果一个socket或者句柄突然被关闭(比如socket.close()),close事件将会在这个阶段被发出,否则将会被process.nextTick()

setImmediate() VS setTimeout()

setImmediate()和setTimeout()非常像,但是调用的时机不同,他们的表现行为不同。

  • setImmediate()被设计用来在poll阶段完成后执行一段脚本  
  • setTimeout()被设计用来在一段时间后执行一段脚本   timers执行的顺序的变化取决于他们被调用时的环境。如果两者都在主要模块内部被调用,那么计时过程将受到进程的性能约束(会受到运行在机器上的其他程序影响)   比如,如果我们在I/O循环外(也就是主模块)运行下面的脚本,两个计时器的执行顺序将是不确定的,那么执行顺序将会受到进程性能的约束。  
setTimeout(() => {
    console.log('timeout');
  }, 0);
  
  setImmediate(()=>{
    console.log('immediate');
  });
  

然而,如果将timers移到I/O循环内部,则setImmediate()方法的回调总是首先执行。  

const fs = require('fs');

fs.readFile('./hello', (error, data) => {
  console.log('data is '+data)
  setTimeout(() => {
    console.log('timeout');
  }, 0);
  
  setImmediate(()=>{
    console.log('immediate');
  })
});

使用setImmediate()的最大优点是在I/O周期内他的执行顺序总是先于任何的timer

process.nextTick()

理解 process.nextTick()

我们可能会注意到尽管process.nextTick()是异步API的一部分,但他并没有出现在event loop图示中。 这是因为技术上process.nextTick()并不是event loop的部分。nextTickQueue将会在当前操作完成后被处理, 而不是当前event loop阶段完成后。回头看event loop图示,任何时候在给定阶段调用process.nextTick(), 所有传递给process.nextTick()的回调都会在eventloop继续执行前被调用。这个特性将会制造一些不好的场景, 因为他允许通过递归调用process.nextTick(),阻止eventloop到达pool阶段造成“饥饿”I/O。
为什么类似会被设计到Nodejs中?这是“一个API始终是异步哪怕非必须”设计哲理的一部分。

function apiCall(arg, callback) {
  if (typeof arg !== 'string')
    return process.nextTick(callback,
                            new TypeError('argument should be string'));
}

代码片段做了一个参数校验,如果参数不正确,就会给回调函数callback传递一个错误。process.nextTick()第一个参数 可以使一个方法,之后的参数作为该方法的执行参数。 这段代码逻辑是会在剩余的代码执行后将一个错误返回给用户,通过使用process.nextTick()保证了apiCall()方法在用户剩余代码 之后、eventloop继续执行之前执行定义在其中的回调方法callback。为了做到这样,js调用栈被允许解绑然后直接执行提供的回调 callback函数-可以允许递归调用process.nextTick()而不会达到V8规定的最大递归数而抛出RangeError: Maximum call stack size exceeded from v8。 这种设计哲学可能会导致一些潜在的问题。例如以下代码片段

let bar;

// this has an asynchronous signature, but calls callback synchronously
function someAsyncApiCall(callback) { callback(); }

// the callback is called before `someAsyncApiCall` completes.
someAsyncApiCall(() => {
  // since someAsyncApiCall has completed, bar hasn't been assigned any value
  console.log('bar', bar); // undefined
});

bar = 1;

用户定义了异步标识(名称)的someAsyncApiCall()方法,但是他内部代码实际上是同步执行的。当这个方法被调用,其内部的callback 会同时被调用因为someAsyncApiCall()方法没有任何异步操作。结果是,callback尝试引用变量bar即使他还可能不存在于作用域中,因为 脚本还没执行完毕,这个变量还没初始化。 通过将callback放到process.nextTick()中,脚本依然可以执行完毕,允许变量、方法等在callback被调用之前初始化。 他还有个有点就是可以阻塞eventloop继续执行,在event loop继续执行前弹出个错误可能对用户来说很有用。以下是使用process.nextTick() 后的代码。

let bar;

function someAsyncApiCall(callback) {
  process.nextTick(callback);
}

someAsyncApiCall(() => {
  console.log('bar', bar); // 1
});

bar = 1;

另外一个真实的例子

const server = net.createServer(() => {}).listen(8080);

server.on('listening', () => {});

当只传递一个端口,端口直接被绑定。紧接着调用listening回调,问题是这个时候绑定listening回调的代码可能还没执行。 为了避免这样,在listen方法中将listening事件触发设置到process.nextTick()中的队列里让其他代码先执行完成,这样绑定事件的代码写到任何地方都可以被先于事件触发执行。

process.nextTick() VS setImmediate()

这两个调用名字很具有迷惑性。

  • process.nextTick()在eventloop的同一阶段就会立即触发
  • setImmediate()则会在event loop接下来的迭代‘tick’触发   本质上这两个方法名称调换一下更合适,process.nextTick()比setImmediate触发的更直接,但是这块是一个难以改变的历史原因。如果调换名称则会破坏npm上 很大一部分现有的第三方包,每天都有更多的新包产生,意味着随着时间推移,这个代价会越大。虽然他们很容易混淆,但是名字本身是不能改变的。   推荐开发者尽量使用setImmediate(),因为他可读性更强且对js环境有更好的适应性(比如browser js)。

为什么要使用process.nextTick()

  • 允许用户处理错误,清理任何不需要的资源,或者在event loop继续执行之前重新发起request
  • 有些时候在调用栈解绑但是event loop继续之前执行一些回调还是很必要的   请看下面这个简单例子
const server = net.createServer();
server.on('connection', (conn) => { });

server.listen(8080);
server.on('listening', () => { });

假设listen()方法在event loop开始的时候执行,但是listening回调方法被放在了setImmediate()方法中。除非传递一个主机名,否则绑定端口行为将立即执行。 为了让event loop继续执行,必须到达poll阶段。这意味着存在一种可能一个已被接收的connection可能会在listening事件之前触发connection事件   另外一个例子是运行一个构造函数,比如说,继承自EventEmitter而且构造函数内想要调用某个事件

const EventEmitter = require('events');
const util = require('util');

function MyEmitter() {
  EventEmitter.call(this);
  this.emit('event');
}
util.inherits(MyEmitter, EventEmitter);

const myEmitter = new MyEmitter();
myEmitter.on('event', () => {
  console.log('an event occurred!');
});

上面这段代码有个问题,不能在构造函数中直接调用event,因为构造函数运行的时候event时间监听代码还没执行到。这样的话,在构造函数内部,将调用event事件的代码放到process.nextTick()的回调中,就可以得到期望的结果,在构造方法之后运行。以下是代码:

const EventEmitter = require('events');
const util = require('util');

function MyEmitter() {
  EventEmitter.call(this);

  // use nextTick to emit the event once a handler is assigned
  process.nextTick(() => {
    this.emit('event');
  });
}
util.inherits(MyEmitter, EventEmitter);

const myEmitter = new MyEmitter();
myEmitter.on('event', () => {
  console.log('an event occurred!');
});

thinking-in-nodejs's People

Contributors

nodepaladin avatar

Watchers

 avatar  avatar

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.