聊聊Node.js + worker_threads如何实现多线程?(详解)

 4001

本篇文章带大家了解一下worker_threads 模块,介绍一下在Node中如何使用worker_threads实现多线程,以及利用worker_threads执行斐波那契数列作为实践例子,希望对大家有所帮助!


聊聊Node.js + worker_threads如何实现多线程?(详解)


通常情况下,Node.js被认为是单线程。由主线程去按照编码顺序一步步执行程序代码,一旦遇到同步代码阻塞,主线程就会被占用,后续的程序代码的执行都会被卡住。没错Node.js的单线程指的是主线程是"单线程"。

为了解决单线程带来的问题,本文的主角worker_threads出现了。worker_threads首次在Node.js v10.5.0作为实验性功能出现,需要命令行带上--experimental-worker才能使用。直到v12.11.0稳定版才能正式使用。

本文将会介绍worker_threads的使用方式,以及利用worker_threads执行斐波那契数列作为实践例子。

先决条件

阅读并食用本文,需要先具备:

安装了 Node.js v12.11.0 及以上版本

掌握 JavaScript 同步和异步编程的基础知识

掌握 Node.js 的工作原理

worker_threads 介绍

worker_threads 模块允许使用并行执行 JavaScript 的线程。

工作线程对于执行 CPU 密集型的 JavaScript 操作很有用。 它们对 I/O 密集型的工作帮助不大。 Node.js 内置的异步 I/O 操作比工作线程更高效。

与 child_process 或 cluster 不同,worker_threads 可以共享内存。 它们通过传输 ArrayBuffer 实例或共享 SharedArrayBuffer 实例来实现。

由于以下特性,worker_threads已被证明是充分利用CPU性能的最佳解决方案:

它们运行具有多个线程的单个进程。

每个线程执行一个事件循环。

每个线程运行单个 JS 引擎实例。

每个线程执行单个 Nodejs 实例。

worker_threads 如何工作

worker_threads通过执行主线程指定的脚本文件来工作。每个线程都在与其他线程隔离的情况下执行。但是,这些线程可以通过消息通道来回传递消息。

主线程使用worker.postMessage()函数使用消息通道,而工作线程使用parentPort.postMessage()函数。

通过官方示例代码加强了解:

  1. const {
  2.   Worker, isMainThread, parentPort, workerData
  3. } = require('worker_threads');
  4.  
  5. if (isMainThread) {
  6.   module.exports = function parseJSAsync(script) {
  7.     return new Promise((resolve, reject) => {
  8.       const worker = new Worker(__filename, {
  9.         workerData: script
  10.       });
  11.       worker.on('message', resolve);
  12.       worker.on('error', reject);
  13.       worker.on('exit', (code) => {
  14.         if (code !== 0)
  15.           reject(new Error(`Worker stopped with exit code ${code}`));
  16.       });
  17.     });
  18.   };
  19. } else {
  20.   const { parse } = require('some-js-parsing-library');
  21.   const script = workerData;
  22.   parentPort.postMessage(parse(script));
  23. }

上述代码主线程工作线程都使用同一份文件作为执行脚本(__filename为当前执行文件路径),通过isMainThread来区分主线程工作线程运行时逻辑。当模块对外暴露方法parseJSAsync被调用时候,都将会衍生子工作线程去执行调用parse函数。

worker_threads 具体使用

在本节使用具体例子介绍worker_threads的使用

创建工作线程脚本文件workerExample.js:

  1. const { workerData, parentPort } = require('worker_threads')
  2. parentPort.postMessage({ welcome: workerData })

创建主线程脚本文件main.js:

  1. const { Worker } = require('worker_threads')
  2.  
  3. const runWorker = (workerData) => {
  4.     return new Promise((resolve, reject) => {
  5.         // 引入 workerExample.js `工作线程`脚本文件
  6.         const worker = new Worker('./workerExample.js', { workerData });
  7.         worker.on('message', resolve);
  8.         worker.on('error', reject);
  9.         worker.on('exit', (code) => {
  10.             if (code !== 0)
  11.                 reject(new Error(`stopped with  ${code} exit code`));
  12.         })
  13.     })
  14. }
  15.  
  16. const main = async () => {
  17.     const result = await runWorker('hello worker threads')
  18.     console.log(result);
  19. }
  20.  
  21. main().catch(err => console.error(err))

控制台命令行执行:

  1. node main.js

输出:

  1. { welcome: 'hello worker threads' }


worker_threads 运算斐波那契数列

在本节中,让我们看一下 CPU 密集型示例,生成斐波那契数列

如果在没有工作线程的情况下完成此任务,则会随着nth期限的增加而阻塞主线程。

创建工作线程脚本文件worker.js

  1. const {parentPort, workerData} = require("worker_threads");
  2.  
  3. parentPort.postMessage(getFibonacciNumber(workerData.num))
  4.  
  5. function getFibonacciNumber(num) {
  6.     if (num === 0) {
  7.         return 0;
  8.     }
  9.     else if (num === 1) {
  10.         return 1;
  11.     }
  12.     else {
  13.         return getFibonacciNumber(num - 1) + getFibonacciNumber(num - 2);
  14.     }
  15. }

创建主线程脚本文件main.js:

  1. const {Worker} = require("worker_threads");
  2.  
  3. let number = 30;
  4.  
  5. const worker = new Worker("./worker.js", {workerData: {num: number}});
  6.  
  7. worker.once("message", result => {
  8.     console.log(`${number}th Fibonacci Result: ${result}`);
  9. });
  10.  
  11. worker.on("error", error => {
  12.     console.log(error);
  13. });
  14.  
  15. worker.on("exit", exitCode => {
  16.     console.log(`It exited with code ${exitCode}`);
  17. })
  18.  
  19. console.log("Execution in main thread");

控制台命令行执行:

  1. node main.js

输出:

  1. Execution in main thread
  2. 30th Fibonacci Result: 832040
  3. It exited with code 0

main.js文件中,我们从类的实例创建一个工作线程,Worker正如我们在前面的示例中看到的那样。

为了得到结果,我们监听 3 个事件,

message响应工作线程发出消息。

exit工作线程停止执行的情况下触发的事件。

error发生错误时触发。

我们在最后一行main.js

  1. console.log("Execution in main thread");

通过控制台的输出可得,主线程并没有被斐波那契数列运算执行而阻塞。

因此,只要在工作线程中处理 CPU 密集型任务,我们就可以继续处理其他任务而不必担心阻塞主线程。

结论

Node.js 在处理 CPU 密集型任务时一直因其性能而受到批评。通过有效地解决这些缺点,工作线程的引入提高了 Node.js 的功能。

有关worker_threads的更多信息,请在此处访问其官方文档。

思考

文章结束前留下思考,后续会在评论区做补充,欢迎一起讨论。

worker_threads线程空闲时候会被回收吗?

worker_threads共享内存如何使用?

既然说到线程,那么应该有线程池?


本文网址:https://www.zztuku.com/detail-11023.html
站长图库 - 聊聊Node.js + worker_threads如何实现多线程?(详解)
申明:本文转载于《掘金社区》,如有侵犯,请 联系我们 删除。

评论(0)条

您还没有登录,请 登录 后发表评论!

提示:请勿发布广告垃圾评论,否则封号处理!!

    编辑推荐