搜索
首页web前端js教程初步了解Nodejs中的异步I/O

初步了解Nodejs中的异步I/O

Apr 19, 2021 am 10:08 AM
nodejs异步i/o

本篇文章带大家初步了解下Nodejs中的异步I/O。有一定的参考价值,有需要的朋友可以参考一下,希望对大家有所帮助。

初步了解Nodejs中的异步I/O

“异步”这个名词其实在Node之前就已经诞生了。但是在绝大多数高级编程语言中,异步并不多见。在众多高级语言或运行平台中,将异步作为主要编程方式和设计理念的,Node是首个。【相关推荐:《nodejs 教程》】

异步I/O、事件驱动和单线程构成了Node的基调,而Nginx与Node的事件驱动、异步I/O设计理念比较相近。Nginx采用纯C编写,性能表现非常优异,具备面向客户端管理连接的强大能力,但是它的背后依然受限于各种同步方式的编程语言。但Node是全方位的,既可以作为服务器端去处理客户端带来的大量并发请求,也能作为客户端向网络中的各个应用进行并发请求。

为什么要异步I/O


为什么异步I/O在Node中如此重要,这是因为Node面向网络设计,在跨网络的结构下,并发已经是现代编程中的标准配备了。

用户体验

《高性能JavaScript》中提到过,如果脚本的执行时间超过100毫秒,用户就会感到页面卡顿,以为页面停止响应。而在B/S模型中,网络速度的限制给网页的实时体验造成很大的麻烦。

如果网页临时需要获取一个资源,通过同步的方式获取,那么JavaScript则需要等待资源完全从服务器端获取后才能继续执行,这期间UI停顿,不响应用户的交互行为。这样用户体验将会极差。而采用异步请求,在下载资源期间,JavaScript和UI的执行都不会处于等待状态,可以继续响应用户的交互行为。

同理,前端通过异步可以消除掉UI阻塞现象,但是前端获取资源的速度也取决于后端的响应速度。假如一个资源来自于两个不同位置的数据的返回,第一个资源消耗M毫秒,第二个资源消耗N毫秒。如果采用同步的方式,获取两个资源消耗的的时间为M+N毫秒。而采用异步的方式,第一个资源的获取并不会阻塞第二个资源的获取,消耗的时间为max(M,N)。

随着网站或应用不断膨胀,M与N的值会线性增长,那么异步的性能将比同步更加优越。

资源分配

假设业务场景中有一组互不相关的任务需要完成,有以下两种主流的方法:

  • 单线程串行一次执行
  • 多线程并行完成

如果创建多线程的开销小于并行执行,那么多线程是首选的,但是多线程在创建线程和执行期线程上下文切换的开销较大,而且多线程编程经常面临锁、状态同步等问题。

单线程顺序执行任务的缺点在于性能,任意一个略慢的任务都会导致后续执行代码被阻塞。在计算机资源中,通常I/O与CPU计算之间是可以并行执行的,但是同步的编程模型导致I/O的进行会让后续任务等待,造成资源不能被更好的利用。

Node利用单线程,远离多线程死锁、状态同步等问题;利用异步I/O,让单线程远离阻塞,更好的利用CPU。

异步I/O实现


异步I/O在Node中应用最为广泛,但是它并不是Node的原创。

异步I/O与非阻塞I/O

对于计算机内核I/O而言,异步/同步和阻塞/非阻塞是两码事。

操作系统对于I/O只有两种方式:阻塞和非阻塞。在调用阻塞I/O时,应用程序需要等待I/O完成才返回结果。

阻塞I/O的一个特点是调用之后一定要等到系统内核层面完成所有操作之后,调用才结束。阻塞I/O造成CPU等待I/O,浪费等待时间,CPU的处理能力不能得到充分利用。

为了提高性能,内核提供了非阻塞I/O。非阻塞I/O跟阻塞I/O的差别为调用之后会立即返回,非阻塞I/O返回之后,CPU的时间片可以用来处理其他事物,此时提升性能是明显的,但是由于完成的I/O并没有完成,立即返回的并不是业务层期望的数据,而仅仅是当前的调用状态。

为了获取完整的数据,应用程序需要重复调用I/O操作来确认是否完成。这种重复调用判断操作是否完成的技术叫做轮询

现存的轮询技术主要有read、select、poll、epoll和kqueue。这里只讲一下epoll的轮询原理。

epoll是Linux下效率最高的I/O事件通知机制,在进入轮询的时候,如果没有检查到I/O事件,将会进行休眠,直到事件发生将它唤醒。它是真实利用了事件的通知、执行回调的方式,而不是遍历查询,所以不会浪费CPU,执行效率较高。

1.png

轮询技术满足了非阻塞I/O确保获取完整数据的需求,但是对于程序而言,它仍然算是一种同步,因为应用程序仍然需要等待I/O完全返回,依旧花费了很多时间等待。等待期间,CPU要么用于遍历文件描述符,要么用于休眠等待时间发生。

现实的异步I/O

通过让部分线程进行阻塞I/O或者非阻塞I/O加轮询技术来完成数据获取,让一个线程进行计算处理,通过线程之间的通信将I/O得到的数据进行传递,这就轻松实现了异步I/O(虽然这是模拟的)

但是最初,Node在*nix 平台下采用了libeio配合libev实现I/O部分,实现了异步I/O。在Node v0.9.3中,自行实现了线程池来完成异步I/O。

而Windows下的IOCP在某种程度上提供了黎翔的异步I/O:调用异步方法,等待I/O完成之后的通知,执行回调,用户无需考虑轮询。但是它的内部其实依然是线程池原理,不同之处在于这些线程池有系统内核接手管理。

由于Windows平台和*nix平台的差异,Node提供了libuv作为抽象封装层,使得所有平台兼容性的判断都由这一层来完成,并保证上层的Node与下层的自定义线程池及IOCP之间个字独立。

2.png

我们时常提到Node是单线程的,这里的单线程仅仅只是JavaScript执行在单线程中。在Node中,无论是*nix还是Windows平台,内部完成I/O任务的另有线程池。

Node的异步I/O


完成整个异步I/O环节的有事件循环、观察者和请求对象等。

事件循环

事件循环是Node自身的执行模型,正式它使得回调函数十分普遍。

在进程启动时,Node便会创建一个类似于while(true)的循环,每执行一次循环体的过程我们称为Tick。每个Tick的过程就是查看是否有事件待处理,如果有就取出事件及其相关的回调函数。如果存在关联的回调函数,就执行他们。然后进入下个循环,如果不再有事件处理,就退出进程。

3.png

观察者

每个事件循环中有一个或者多个观察者,而判断是否有事件要处理的过程就是向这些观察者询问是否有要处理的事件。

在Node中,事件主要来源于网络请求、文件I/O等,这些时间对应的观察者有文件I/O观察者、网络I/O观察者等。观察者将事件进行了分类。

事件循环是一个典型的生产者/消费者模型。异步I/O、网络请求等则是事件的生产者,不断为Node提供不同类型的事件,这些事件被传递到对应的观察者那里,事件循环则从观察者那里取出事件并处理。

请求对象

对于Node的异步I/O调用而言,回调函数不由开发者来调用。从JavaScript发起调用到内核执行完I/O操作的过渡过程中,存在一种产物,叫做请求对象

下面用fs.open()方法作为一个小小的例子。

fs.open = function(path,flags,mode,callback){
    //...
    binding.open(pathModule._makeLong(path),
                    stringToFlags(flags),
                    mode,
                    callback);
}

fs.open()的作用是根据指定路径和参数去打开一个文件,从而得到一个文件描述符,这是后续所有I/O操作的初试操作。JavaScript层面的代码通过调用C++核心模块进行下层的操作。

4.png

从事JavaScript调用Node的核心模块,核心模块调用C++模块,内建模块通过libuv进行系统调用,这里是Node里经典的调用方式。这里libuv作为封装层,有两个平台的实现,实质上是调用了uv_fs_open()方法。在uv_fs_open()的调用过程中,将从JavaScript层传入的参数和当前方法都封装在一个请求对象中,回调函数则被设置在这个对象的属性上。对象包装完毕后,将对象推入线程池等待执行。

至此,JavaScript调用立即返回,由JavaScript层面发起的异步调用的第一阶段就此结束。JavaScript线程可以继续执行当前任务的后续操作。

请求对象是异步I/O过程中的重要中间产物,所有的状态都保存在这个对象中,包括送入线程池等待执行以及I/O操作完毕后的回调处理。

执行回调

组装好请求对象、送入I/O线程池等待执行,只是完成一部I/O的第一部分,回调通知是第二部分。

线程池中的I/O操作调用完毕之后,会将获取的结果存储在req->result属性上,然后调用PostQueueCompletionStatus()通知IOCP,告知当前对象操作已经完成。

至此,整个异步I/O的流程完全结束。

5.png

事件循环、观察者、请求对象、I/O线程池这四者共同构成了Node异步I/O模型的基本要素。

小结

整理下来,我们可以提取异步I/O的几个关键词:单线程、事件循环、观察者和I/O线程池。单线程和线程池看起来有些悖论的样子。因为JavaScript是单线程的,所以很容易理解为它不能充分利用多核CPU。实际上,在Node中,除了JavaScript是单线程外,Node自身其实是多线程的,只是I/O线程使用的CPU较少。还有就是除了用户代码无法并行执行外,所有的I/O(磁盘I/O和网络I/O等)都是可以并行起来的。

更多编程相关知识,请访问:编程视频!!

以上是初步了解Nodejs中的异步I/O的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文转载于:掘金社区。如有侵权,请联系admin@php.cn删除
Python vs. JavaScript:社区,图书馆和资源Python vs. JavaScript:社区,图书馆和资源Apr 15, 2025 am 12:16 AM

Python和JavaScript在社区、库和资源方面的对比各有优劣。1)Python社区友好,适合初学者,但前端开发资源不如JavaScript丰富。2)Python在数据科学和机器学习库方面强大,JavaScript则在前端开发库和框架上更胜一筹。3)两者的学习资源都丰富,但Python适合从官方文档开始,JavaScript则以MDNWebDocs为佳。选择应基于项目需求和个人兴趣。

从C/C到JavaScript:所有工作方式从C/C到JavaScript:所有工作方式Apr 14, 2025 am 12:05 AM

从C/C 转向JavaScript需要适应动态类型、垃圾回收和异步编程等特点。1)C/C 是静态类型语言,需手动管理内存,而JavaScript是动态类型,垃圾回收自动处理。2)C/C 需编译成机器码,JavaScript则为解释型语言。3)JavaScript引入闭包、原型链和Promise等概念,增强了灵活性和异步编程能力。

JavaScript引擎:比较实施JavaScript引擎:比较实施Apr 13, 2025 am 12:05 AM

不同JavaScript引擎在解析和执行JavaScript代码时,效果会有所不同,因为每个引擎的实现原理和优化策略各有差异。1.词法分析:将源码转换为词法单元。2.语法分析:生成抽象语法树。3.优化和编译:通过JIT编译器生成机器码。4.执行:运行机器码。V8引擎通过即时编译和隐藏类优化,SpiderMonkey使用类型推断系统,导致在相同代码上的性能表现不同。

超越浏览器:现实世界中的JavaScript超越浏览器:现实世界中的JavaScriptApr 12, 2025 am 12:06 AM

JavaScript在现实世界中的应用包括服务器端编程、移动应用开发和物联网控制:1.通过Node.js实现服务器端编程,适用于高并发请求处理。2.通过ReactNative进行移动应用开发,支持跨平台部署。3.通过Johnny-Five库用于物联网设备控制,适用于硬件交互。

使用Next.js(后端集成)构建多租户SaaS应用程序使用Next.js(后端集成)构建多租户SaaS应用程序Apr 11, 2025 am 08:23 AM

我使用您的日常技术工具构建了功能性的多租户SaaS应用程序(一个Edtech应用程序),您可以做同样的事情。 首先,什么是多租户SaaS应用程序? 多租户SaaS应用程序可让您从唱歌中为多个客户提供服务

如何使用Next.js(前端集成)构建多租户SaaS应用程序如何使用Next.js(前端集成)构建多租户SaaS应用程序Apr 11, 2025 am 08:22 AM

本文展示了与许可证确保的后端的前端集成,并使用Next.js构建功能性Edtech SaaS应用程序。 前端获取用户权限以控制UI的可见性并确保API要求遵守角色库

JavaScript:探索网络语言的多功能性JavaScript:探索网络语言的多功能性Apr 11, 2025 am 12:01 AM

JavaScript是现代Web开发的核心语言,因其多样性和灵活性而广泛应用。1)前端开发:通过DOM操作和现代框架(如React、Vue.js、Angular)构建动态网页和单页面应用。2)服务器端开发:Node.js利用非阻塞I/O模型处理高并发和实时应用。3)移动和桌面应用开发:通过ReactNative和Electron实现跨平台开发,提高开发效率。

JavaScript的演变:当前的趋势和未来前景JavaScript的演变:当前的趋势和未来前景Apr 10, 2025 am 09:33 AM

JavaScript的最新趋势包括TypeScript的崛起、现代框架和库的流行以及WebAssembly的应用。未来前景涵盖更强大的类型系统、服务器端JavaScript的发展、人工智能和机器学习的扩展以及物联网和边缘计算的潜力。

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
4 周前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳图形设置
4 周前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您听不到任何人,如何修复音频
4 周前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解锁Myrise中的所有内容
1 个月前By尊渡假赌尊渡假赌尊渡假赌

热工具

螳螂BT

螳螂BT

Mantis是一个易于部署的基于Web的缺陷跟踪工具,用于帮助产品缺陷跟踪。它需要PHP、MySQL和一个Web服务器。请查看我们的演示和托管服务。

ZendStudio 13.5.1 Mac

ZendStudio 13.5.1 Mac

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 英文版

SublimeText3 英文版

推荐:为Win版本,支持代码提示!

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版