文档章节

多进程 VS 多线程 VS 线程池 VS EventLoop

精通吹水
 精通吹水
发布于 2016/04/20 15:41
字数 875
阅读 360
收藏 4

多进程 VS 多线程 VS 线程池 VS EventLoop

在现在的编程过程中,经常听到多进程,多线程,线程池,EventLoop 的概念,选择一个正确的驱动模型,有助于提升代码的性能。

注:本文仅仅讨论并发的情况。

进程和线程

  • 进程:操作系统中资源管理对象,管理虚拟内存,文件句柄,线程等资源,但是进程不是执行单元

  • 线程:具体的执行单元。CPU是实际的物理执行单元,通过寄存器可以控制CPU执行的代码以及状态。而线程就是包含了一个任务的CPU上下文(寄存器),任务状态(就绪|阻塞|运行),所属用户等信息的对象。操作系统接收到时间中断(INT)后,通过轮转线程中的CPU上下文(寄存器)信息,实现了多任务的轮转

多进程

多进程:针对并发请求,一个请求开启一个进程进行处理。早起CGI就是这么干的。

代表:早期PHP,CGI类

优点:

  • 一个业务进程奔溃不影响另外一个业务进程,从操作系统层面上隔离业务执行
  • 如果进程采用Socket之类的RPC调用,那么非常容易部署到网络环境上

缺点:

  • RPC调用比较难以编写
  • 频繁的开启和关闭进程,性能比较差
  • 不允许内存共享(排除内核支持情况)

多线程

多线程:针对不同的业务逻辑,并发的开启多个线程进行执行。

代表:早期 Tomcat Bio模型

优点:

  • 内存是共享的
  • 编写并发模型比较方便
  • 有效的利用多核CPU

缺点:

  • 并发量过大的时候,开启了太多线程(有些阻塞在IO),导致CPU上下文切换太过频繁
  • 过多的线程,会占用许多内存(2MB/Thread),造成服务器奔溃
  • 需要做并发控制

线程池

线程池:开启固定的线程,当有请求过来的时候,查询是否存在空闲线程,如果存在,则使用空闲线程执行任务,否则加入等待执行队列

代表:Netty,Jetty

优点:

  • 有效的利用多核CPU
  • 内存共享
  • 减少了CPU上下文切换消耗

缺点:

  • 还是存在一部分IO等待,导致CPU无法有效的利用
  • 需要做并发控制

EventLoop

EventLoop:仅仅开启一条main线程执行任务,其他所有的IO操作等,都放在后台线程中执行,对于新的请求,都加入到queue中,等待main线程调度。

代表:Node.js

优点:

  • 大部分情况下,不需要做并发控制
  • 减少了CPU上下文切换消耗

缺点:

  • 无法有效利用多核CPU(当然可以多开EventLoop)
  • 回调陷进,调试比较困难

总结

上述的各种编程模型,都出现在我们的实际的开发过程中,其核心思想为:有效的利用CPU,减少阻塞等待和非业务代码(如上下文切换)的运行时间占用。

参考

© 著作权归作者所有

共有 人打赏支持
精通吹水
粉丝 18
博文 56
码字总数 55035
作品 0
人事招聘
适合抓取封堵的爬虫框架 - vscrawler

VSCrawler是一个适合用作抓取的爬虫框架,在更多场景倾向于功能扩展性而牺牲使用简便性。这让VSCrawler非常强大,让他可以灵活的应对目标网站的反爬虫策略。为了方便描述,文档中可能使用VS替...

virjar
2017/12/10
304
0
vscrawler 0.2.1发布,适合用作抓取的爬虫框架

VSCrawler是一个适合用作抓取的爬虫框架,在更多场景倾向于功能扩展性而牺牲使用简便性。这让VSCrawler非常强大,让他可以灵活的应对目标网站的反爬虫策略。 vscrawler有挺多特点 1. 多用户登...

virjar
2017/12/16
686
8
DICOM:DICOM开源库多线程分析之“ThreadPoolQueue in fo-dicom”

背景: 上篇博文介绍了dcm4chee中使用的Leader/Follower线程池模型,主要目的是节省上下文切换,提高运行效率。本博文同属【DICOM开源库多线程分析】系列,着重介绍fo-dicom中使用的ThreadP...

zssureqh
2016/02/05
0
0
分布式爬虫笔记(二)- 多线程&多进程爬虫

这一次分析主要是针对上 分布式爬虫笔记(一)- 非框架实现的Crawlspider 的一次改进,从单机的爬虫改成多线程和多进程爬虫~~~ 多线程和多进程的区别 参考文章 单线程、多线程和多进程的效率...

Spareribs
2017/07/13
0
0
Python协程(真才实学,想学的进来)

***真正有知识的人的成长过程,就像麦穗的成长过程:麦穗空的时候,麦子长得很快,麦穗骄傲地高高昂起,但是,麦穗成熟饱满时,它们开始谦虚,垂下麦芒。 *** 上篇论述了关于python多线程是否...

p柯西
06/27
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

day63-20180821-流利阅读笔记-待学习

性别歧视在日本:“我是女生,所以社会不让我学医” 毛西 2018-08-21 1.今日导读 大家在看病的时候,有留意过女医生的比例吗?在性别歧视现象十分严重的日本,男医生和女医生的比例达到了惊人...

aibinxiao
54分钟前
2
0
Ubuntu18.04 显卡GF-940MX安装NVIDIA-390.77

解决办法: 下面就给大家一个正确的姿势在Ubuntu上安装Nvidia驱动: (a)首先去N卡官网下载自己显卡对应的驱动:www.geforce.cn/drivers (b)下载后好放在英文路径的目录下,怎么简单怎么来...

AI_SKI
今天
4
0
深夜胡思乱想

魔兽世界 最近魔兽世界出了新版本, 周末两天升到了满级,比之前的版本体验好很多,做任务不用抢怪了,不用组队打怪也是共享拾取的。技能简化了很多,哪个亮按哪个。 运维 服务器 产品 之间的...

Firxiao
今天
1
0
MySQL 8 在 Windows 下安装及使用

MySQL 8 带来了全新的体验,比如支持 NoSQL、JSON 等,拥有比 MySQL 5.7 两倍以上的性能提升。本文讲解如何在 Windows 下安装 MySQL 8,以及基本的 MySQL 用法。 下载 下载地址 https://dev....

waylau
今天
2
0
微信第三方平台 access_token is invalid or not latest

微信第三方开发平台code换session_key说的特别容易,但是我一使用就带来无穷无尽的烦恼,搞了一整天也无济于事. 现在记录一下解决问题的过程,方便后来人参考. 我遇到的这个问题搜索了整个网络也...

自由的开源
今天
3
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部