最新下载
热门教程
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10
Node.js使用多进程提高任务执行效率代码分析
时间:2022-09-27 编辑:坚强 来源:一聚教程网
本文为大家带来了关于Node.js使用多进程提高任务执行效率代码分析,感兴趣的小伙伴一起来看看吧。
什么是 Node 多进程?
Node 是在单个线程中运行,我们虽然没办法开启额外的线程,但是可以开启进程集群。这样可以让下载任务和上传任务同时进行。
使用多进程进行初步代码优化
简单看了一下学员的代码,大概是这样:
const dl = require('./download.js') const ul = require('./upload.js') const source = require('./source.js') async function runTask() { const { originUrl, targetUrl } = source.getNext() const { data } = await dl(originUrl) await ul(targetUrl, data) runTask() } runTask()
这个代码逻辑上是没问题的,但是它只能在 1 个 CPU 核心中运行。
我们完全可以使用 Node.js 的多进程来利用 CPU 的多核心来增加这个程序的吞吐量。
怎么改造呢?
也非常简单。
const os = require('os') const cluster = require('cluster') const dl = require('./download.js') const ul = require('./upload.js') const source = require('./source.js') function run() { if(cluster.isMaster) { const numCPUs = os.cpus().length; for(let idx = 0; idx < numCPUs; idx++) { cluster.fork(); } } else { runTask() } } async function runTask() { const { originUrl, targetUrl } = source.getNext() const { data } = await dl(originUrl) await ul(targetUrl, data) runTask() } } run()
在上面的代码中,我添加了 os 和 cluster 模块。os 模块可以告诉我们运行环境的 CPU 信息,我们可以通过它来做为创建进程数量的限制条件。然后通过 cluster.isMaster 来判断是否是主进程,因为只有主进程才拥有 fork 的能力。
worker和master通信
其实上面的代码还可以继续做更深层次的优化,仔细分析一下,下载速度和上传速度其实是不一致的。通常来说,下载速度会很慢,但上传速度会很快。我们可以让其他进程去下载文件,当下载成功之后,让主进程去上传文件。
Node 中的多进程之间不会共享内存,所以我们可以通过消息传递的方式,让下载进程通知主进程去上传文件。
const os = require('os') const cluster = require('cluster') const dl = require('./download.js') const ul = require('./upload.js') const source = require('./source.js') function run() { if(cluster.isMaster) { const numCPUs = os.cpus().length; for(let idx = 0; idx < numCPUs; idx++) { const worker = cluster.fork(); worker.on('message', ({ targetUrl, data }) => { ul(targetUrl, data) }) } } else { runTask() } } async function runTask() { const { originUrl, targetUrl } = source.getNext() const { data } = await dl(originUrl) process.send({ targetUrl, data }) runTask() } run()
可以在主进程中通过 worker.on('message', (msg)=>{}) 的方式来监听子进程发送的消息。在子进程中通过 process.send 来向主进程发送消息。
总结
在 NodeJS 中使用多进程非常简单,合理使用多进程,可以解放硬件的能力,让软件的运行效率得到肉眼可见的提升。
-
上一个: js实现文字无缝轮播介绍
-
下一个: Javascript类型转换解析
相关文章
- js实现音乐播放器代码展示 10-12
- js实现图片查看器代码展示 10-12
- JS中switch的四种写法介绍 10-12
- js实现新闻轮播效果教程 10-11
- JS实现简单的图片切换功能教程 10-11
- js实现下拉刷新和上拉加载解析 09-28