综合事件驱动、五种I/O操作、I/O多路复用select，poll与epoll等多个知识点的集合

最新推荐文章于 2026-02-25 03:30:41 发布
原创 最新推荐文章于 2026-02-25 03:30:41 发布 · 712 阅读 · 2
本文详细介绍了事件驱动、五种I/O操作（阻塞、非阻塞、多路复用、异步I/O）以及Linux下的I/O多路复用技术select、poll、epoll的区别与性能优化，重点阐述了epoll在高并发场景下的优势。

目录：

一. 事件驱动

1、什么是事件驱动

  • 定义：就是根据不同事件触发处理不同的事情（根据事件做反应），将要处理的事件加入队列中而不是立刻处理

2、使用UI编程的点击事件理解事件驱动

  • 1） 目前大部分的UI编程都是事件驱动模型，如很多UI平台都会提供onClick()事件(点击事件)
  • 2） 这个事件就代表鼠标按下事件。事件驱动模型大体思路如下：

    • 第一步：首先得有一个消息队列，来存放要触发的事件

    • 第二步：鼠标按下时，往这个队列中增加一个点击事件（消息），而不是立刻执行；

    • 第三步：有个循环，不断从队列取出事件，根据不同的事件，调用不同的函数，如onClick()、onKeyDown()等

    • 第四步：事件（消息）一般都各自保存各自的处理函数指针，这样，每个消息都有独立的处理函数；

3、创建一个线程监控点击事件的缺点

  • 1） CPU资源浪费，可能鼠标点击的频率非常小，但是扫描线程还是会一直循环检测，这会造成很多的CPU资源浪费；
  • 2） 如果扫描鼠标点击是堵塞的，又会出现下面这样的问题，如果点击后要执行一件事，
    这件事如果是阻塞的需要花5秒，那么在这五秒里鼠标就无法点击第二下
  • 3） 如果一个循环需要扫描的设备非常多，这又会引来响应时间的问题；

二. 五种I/O操作

1、I/O的实质是什么？

  • I/O的实质是将硬盘中的数据，或收到的数据实现从内核态 copy到 用户态的过程
  • 本文讨论的背景是Linux环境下的network IO。

2、5种I/O操作的本质

1. I/O操作举例说明：

  • 1）刚才说了，对于一次IO访问（以read举例），数据会先被拷贝到操作系统内核的缓冲区中
  • 2）然后才会从操作系统内核的缓冲区拷贝到应用程序的地址空间

2. 当一个read操作发生时，它会经历两个阶段：

  • 1）等待数据准备 (Waiting for the data to be ready)，等待将数据（比如文件）读到内核的内存中
  • 2）将数据从内核拷贝到用户的进程里进程中 (Copying the data from the kernel to the
    process)

3. 因为这两个阶段，linux系统产生了下面五种网络模式的方案

  • 1）- 阻塞 I/O（blocking IO）
  • 2）- 非阻塞 I/O（nonblocking IO）
  • 3）- I/O 多路复用（ IO multiplexing）
  • 4）- 异步 I/O（asynchronous IO）
  • 5）- 信号驱动 I/O（ signal driven IO）
  • 注：由于signal driven IO在实际中并不常用，所以我这只提及剩下的四种IO Model。

3、与I/O相关的五个重要概念

1. 用户空间和内核空间
2. 进程切换
3. 进程的阻塞
4. 文件描述符
5. 缓存 I/O

1. 第一个概念：用户空间与内核空间

  • 现在操作系统都是采用虚拟存储器，那么对32位操作系统而言，它的寻址空间（虚拟存储空间）为4G（2的32次方）
  • 操作系统的核心是内核，独立于普通的应用程序，可以访问受保护的内存空间，也有访问底层硬件设备的所有权限。
  • 为了保证用户进程不能直接操作内核（kernel），保证内核的安全，操心系统将虚拟空间划分为两部分：一部分为内核空间，一部分为用户空间
  • 针对linux操作系统而言，将最高的1G字节（从虚拟地址0xC0000000到0xFFFFFFFF），供内核使用，称为内核空间，而将较低的3G字节（从虚拟地址0x00000000到0xBFFFFFFF），供各个进程使用，称为用户空间。

2. 第二个概念：进程切换

  • 为了控制进程的执行，内核必须有能力挂起正在CPU上运行的进程，并恢复以前挂起的某个进程的执行。这种行为被称为进程切换
  • 从一个进程的运行转到另一个进程上运行，这个过程中经过下面这些变化：
    • 1）保存处理机上下文，包括程序计数器和其他寄存器。
    • 2）更新PCB信息。
    • 3）把进程的PCB移入相应的队列，如就绪、在某事件阻塞等队列。
    • 4）选择另一个进程执行，并更新其PCB。
    • 5）更新内存管理的数据结构。
    • 6）恢复处理机上下文。
    • 注：总而言之就是很耗资源

3. 第三个概念：进程的阻塞

  • 正在执行的进程，由于期待的某些事件未发生，如请求系统资源失败、等待某种操作的完成、新数据尚
    未到达或无新工作做等，则由系统自动执行阻塞原语(Block)，使自己由运行状态变为阻塞状态。
  • 可见，进程的阻塞是进程自身的一种主动行为，也因此只有处于运行态的进程（获得CPU），才可能将其转为阻塞状态
  • 当进程进入阻塞状态，是不占用CPU资源的。

4. 第四个概念：文件描述符fd

  • 文件描述符在形式上是一个非负整数，实际上，它是一个索引值， 指向内核为每一个进程所维护的该进程打开文件的记录表
  • 当程序打开一个现有文件或者创建一个新文件时，内核向进程返回一个文件描述符
  • 在程序设计中，一些涉及底层的程序编写往往会围绕着文件描述符展开
  • 但是文件描述符这一概念往往只适用于UNIX、Linux这样的操作系统

5. 第五个概念：缓存 I/O

  • 缓存 I/O 又被称作标准 I/O，大多数文件系统的默认 I/O 操作都是缓存 I/O
  • 在 Linux 的缓存 I/O 机制中，操作系统会将 I/O 的数据缓存在文件系统的页缓存（ page cache ）中。
  • 数据会先拷贝到操作系统内核的缓冲区中，然后才会从操作系统内核缓冲区拷贝到应用程序的地址空间 缓存 I/O 的缺点：
    • 数据在传输过程中需要在应用程序地址空间和内核进行多次数据拷贝操作，这些数据拷贝操作所带来的 CPU 以及内存开销是非常大的。

4.1 阻塞 I/O（blocking IO）

  • 使用recv的默认参数一直等数据直到拷贝到用户空间，这段时间内进程始终阻塞。A同学用杯子装水，打开水龙头装满水然后离开。这一过程就可以看成是使用了阻塞IO模型，因为如果水龙头没有水，他也要等到有水并装满杯子才能离开去做别的事情。很显然，这种IO模型是同步的。
  • 在linux中，默认情况下所有的socket都是blocking，一个典型的读操作流程大概是这样：
    • 1） 进程首先处于阻塞状态调用recv方法，想要去接收数据
    • 2） 然后就会到内核中去读取数据，如果开始内核中没有data
    • 3） 进程就会阻塞，过一会数据来了，然后进程就将数据从内核copy到用户那里
    • 4） Copy结束后就会return OK,用户态就收到数据了

4.2 非阻塞 I/O（nonblocking IO）

  • 改变flags，让recv不管有没有获取到数据都返回，如果没有数据那么一段时间后再调用recv看看，如此循环。B同学也用杯子装水，打开水龙头后发现没有水，它离开了，过一会他又拿着杯子来看看……在中间离开的这些时间里，B同学离开了装水现场(回到用户进程空间)，可以做他自己的事情。这就是非阻塞IO模型。但是它只有是检查无数据的时候是非阻塞的，在数据到达的时候依然要等待复制数据到用户空间(等着水将水杯装满)，因此它还是同步IO。
  • linux下，可以通过设置socket使其变为non-blocking
  • 当对一个non-blocking socket执行读操作时，流程是这个样子：
    • 1）当用户进程发出read操作时，如果kernel中的数据还没有准备好，那么它并不会block 用户进程，而是立刻返回一个error。
    • 2）从用户进程角度讲 ，它发起一个read操作后，并不需要等待，而是马上就得到了一个结果。
    • 3）用户进程判断结果是一个error时，它就知道数据还没有准备好，于是它可以再次发送read操作
    • 4）一旦kernel中的数据准备好了，并且又再次收到了用户进程的system call，那么它马上就将数据拷贝到了用户内存，然后返回。
  • 注：所以，nonblocking IO的特点是用户进程需要不断的主动询问kernel数据好了没有。

4.3 I/O 多路复用（ IO multiplexing）

  • 特点： 用户还是要等待数据从kernel拷贝到用户进程
  • IO multiplexing就是我们说的select，poll，epoll，有些地方也称这种IO方式为event driven IO
  • select/epoll的好处就在于单个process就可以同时处理多个网络连接的IO。
  • 它的基本原理就是select，poll，epoll这个function会不断的轮询所负责的所有socket，当某个socket有数据到达了，就通知用户进程
    • 1）当用户进程调用了select，那么整个进程会被block，而同时，kernel会“监视”所有select负责的socket
    • 2）当任何一个socket中的数据准备好了，select就会返回
    • 3）这个时候用户进程再调用read操作，将数据从kernel拷贝到用户进程。
    • 4）虽然是多并发但是还有一些卡，因为都要等待数据从kernel拷贝到用户进程
    • 5）其实select，poll，epoll实质就是循环着接收数据
    • 6）select/epoll的优势并不是对于单个连接能处理得更快，而是在于能处理更多的连接。

4.4 异步 I/O（asynchronous IO）（用户完全不用等）

  • Linux下的asynchronous IO其实用得很少。先看一下它的流程：
    • 1） 用户进程发起read操作之后，立刻就可以开始去做其它的事
    • 2） 而另一方面，从kernel的角度，当它收到一个asynchronous read之后，首先它会立刻返回，所以不会对用户进程产生任何block（首先告诉用户可以去做其他事情了）
    • 3） 然后，kernel会等待数据准备完成，然后将数据拷贝到用户内存，当这一切都完成之后，kernel会给用户进程发送一个signal，告诉它read操作完成了。（然后告诉用户所有东西都弄好了）

5、同步I/O和异步I/O区别

  • 1）同步I/O,异步I/O,多路复用I/O都是同步I/O
  • 2）两者的区别就在于synchronous IO做”IO operation”的时候会将process阻塞
  • 3）而asynchronous IO则不一样，当进程发起IO 操作之后，就直接返回再也不理睬了，直到kernel发送一个信号，告诉进程说IO完成，在这整个过程中，进程完全没有被block

标签
#nginx #python #epoll
最低0.47元/天 解锁文章
【JAVA】IO多路复用之select、poll、epoll详解
fearless的博客
05-25 4020
文章内容1、概述2、selector3、poll4、epoll5、select、poll、epoll区别 1、概述 I/O 多路复用技术通过把多个 I/O 的阻塞复用到同一个 select 的阻塞上，从而使得系统在单线程的情况下可以同时处理多个客户端请求。与传统的多线程/多进程模型比，I/O 多路复用的最大优势是系统开销小，系统不需要创建新的额外进程或者线程，也不需要维护这些进程和线程的运行，降低了系统的维护工作量，节省了系统资源。 其应用场景如下： 服务器需要同时处理多个处于监听状态或者多个连接状态的套
select、poll、epoll的区别
HL_LOVE_C的博客
02-22 1252
是三种 I/O 多路复用机制，用于高效管理多个文件描述符的 I/O 事件。）管理描述符集合，每次调用需将整个集合从用户空间拷贝到内核，内核遍历所有描述符检测就绪状态。：基于事件驱动，内核维护红黑树存储监控的描述符，就绪事件通过双向链表返回。：需非阻塞 I/O 并一次性读取数据，减少系统调用次数，适合高性能场景。：仅在状态变化时通知一次，需一次性处理所有数据。：仅处理就绪事件，性能几乎不受连接数影响。：需结合非阻塞 I/O，避免漏处理事件。：可能重复通知就绪事件，适合简单场景。：只要描述符就绪，持续通知。
信号驱动I/O详解
weixin_42031299的博客
05-09 1323
1、Linux中的信号 1.1、查看信号 [centos6-jk128:latest ~]$ kill -l 1) SIGHUP 2) SIGINT 3) SIGQUIT 4) SIGILL 5) SIGTRAP 6) SIGABRT 7) SIGBUS 8) SIGFPE 9) SIGKILL 10) SIGUSR1 11) SIGSEGV 12) SIGUSR2 13) SIGPIPE 1
python利用IQR方法与3σ方法进行异常值处理（含代码）
weixin_46713695的博客
05-09 1987
python利用IQR方法进行异常值处理
如何理解阻塞IO和非阻塞IO、同步IO、异步IO
mawei982133的博客
06-21 1009
如何理解分5种IO模型、阻塞IO和非阻塞IO、同步IO、信号驱动IO和异步IO前言一、IO的概念二、5种IO模型阻塞IO模型(blocking IO)非阻塞IO模型(nonblocking IO)IO复用模型(IO multiplexing)信号驱动IO模型异步IO模型(Asynchronous I/O) 前言 初学IO模型时，经常搞不明白阻塞(blocking)和非阻塞(non-blocking)，同步(synchronous IO)和异步(asynchronous IO)这些IO模型区别在哪。。这是由于
linux驱动—信号驱动I/O
2401_84888945的博客
12-13 1264
当设备有数据可读时，内核通过kill_fasync()遍历监听队列，向设备的所有者进程发送SIGIO信号。当设备有数据可读或设备状态发生变化时，用户进程会接收SIGIO信号，然后在sigio_handler()中执行特定的处理逻辑（比如读取数据）。信号驱动I/O是一种异步I/O通知机制，当设备就绪（如可读或可写）时，内核发送一个信号给进程，通知它可以执行相应的I/O操作。设置O_ASYNC后，内核在数据可读可写时，使用kill_fasync()发送SIGIO信号，告诉监听的用户进程有数据可读。
面经：计算机操作系统
qq_43808588的博客
09-12 2136
基本特征 1. 并发 并发是指宏观上在一段时间内能同时运行多个程序，而并行则指同一时刻能运行多个指令。 2. 共享 共享是指系统中的资源可以被多个并发进程共同使用。 有两种共享方式：互斥共享和同时共享。互斥共享的资源称为临界资源 3. 虚拟 虚拟技术把一个物理实体转换为多个逻辑实体。 主要有两种虚拟技术：时（时间）分复用技术和空（空间）分复用技术。 多个进程能在同一个处理器上并发执行使用了时分复用技术 虚拟内存使用了空分复用技术，它将物理内存抽象为地址空间。 4. 异步 异步指进程不
什么是信号驱动IO？
java永无止境！
12-01 760
信号驱动 I/O 是一种有效的异步 I/O 模式，适用于高效管理 I/O 操作，特别是在需要高性能和低延迟的场景。通过信号机制，程序能够灵活响应 I/O 事件，提高了并发处理的能力。
I/O 多路复用机制的演进：select → poll → epoll
SoulruiA的博客
10-22 2448
NIO模型不用像BIO那样，每次要启用一个线程去处理一个连接了，而是可以对某个IO事件进行监听，并继续执行其他任务，不需要阻塞等待。的逐步演进和优化，它们在功能上相似（都用于同时监控多个文件描述符的 I/O 事件），但在性能、可扩展性和使用方式上有显著差异。在传统的BIO模型中（同步阻塞型I/O），每一个连接都要对要对应一个线程进行处理，到内核里，让内核来检查是否有网络事件产生，检查的方式很粗暴，，一次是在内核态里，一个次是在用户态里 ，而且还会发生。所以，对于 select 这种方式，需要进行。
I/O多路复用模型之 select、poll、epoll
持之以恒
04-20 7208
Redis 作为一个 Client-Server 架构的数据库，其源码中少不了用来实现网络通信的部分。而你应该也清楚，通常系统实现网络通信的基本方法是使用 Socket 编程模型，**包括创建 Socket、监听端口、处理连接请求和读写请求**。 但是，由于基本的 **Socket 编程模型一次只能处理一个客户端连接上的请求**，所以当要处理高并发请求时，一种方案就是使用多线程，让每个线程负责处理一个客户端的请求。 而 Redis 负责客户端请求解析和处理的线程只有一个，那么如果直接采用基本 Socke
I/O 多路复用器（select、poll、epoll）与 Reactor 模式详解
永不止息
09-17 6044
本文介绍了I/O多路复用器（select、poll、epoll）和Reactor模式。select适用于fd数量少且活跃度高的场景，poll改进了数量限制但仍有轮询开销，epoll采用事件驱动机制，适合高并发场景。Reactor模式基于多路复用器实现事件驱动架构，通过事件循环和回调机制高效处理并发请求，特别适合epoll作为底层实现。总结指出：小型服务可用select/poll，高并发场景推荐epoll+Reactor组合，后者能充分发挥事件驱动优势。
I/O多路复用select/poll/epoll的区别
byteinit的专栏
03-10 1759
I/O多路复用是一种同步的I/O模型，它允许一个进程监视多个文件描述符，并在一个线程中高效地处理来自多个文件描述符的I/O事件。I/O多路复用通过轮询或事件驱动的方式来监视文件描述符。I/O多路复用广泛应用于网络编程、服务器端编程等领域，例如：Linux内核提供了三种I/O多路复用机制：select、poll和epoll都是I/O多路复用技术，用于同时监听多个文件描述符的事件，以便在事件发生时及时响应。它们的主要区别如下：selectC pollC epollC 总结select、poll和ep
【网络底层原理】I/O多路复用技术select、poll和epoll详解与比较
Dylaniou的博客
09-25 1586
当调用select函数时，它会阻塞，直到至少有一个文件描述符就绪，或者超时。每次调用select时，都需要从应用程序传递整个文件描述符集合到内核，即使只有少数几个文件描述符就绪。epoll不需要在每次调用时传递整个文件描述符集合，内核维护了一个事件表，只有当文件描述符状态变化时才会通知应用程序，这大大提高了效率。尽管没有数量限制，但poll在每次调用时都需要传递整个文件描述符集合，这在文件描述符数量很多的情况下可能导致效率问题。poll没有最大文件描述符数量的限制，因此它可以处理更多的并发连接。
【Linux】I/O多路复用模型 select、poll、epoll
努力让自己的能力配得上梦想.
06-20 1465
在监听 socket 时，需要分配多个线程/进程维护多个 socket 连接，I/O 多路复用技术就是用来使用一个进程来监听维护多个 socket 连接 多路： I/O 状态：可读、可写 复用： 使用一个线程/进程监听处理 I/O 事件，复用多个 socket 请求 一、select 模型 select 原理： 1.创建一个文件描述符集合 fd_set set 0 不监听 1 监听 2.设置文件描述符的状态 FD_ZERO(&set); 初始化监听集合，将位码初始化为 0 FD_SET(int s
select、poll、epoll之间的区别比较
C/C++Linux、音视频、DPDK
01-20 8714
select==>时间复杂度O(n) 它仅仅知道了，有I/O事件发生了，却并不知道是哪那几个流（可能有一个，多个，甚至全部），我们只能无差别轮询所有流，找出能读出数据，或者写入数据的流，对他们进行操作。所以select具有O(n)的无差别轮询复杂度，同时处理的流越多，无差别轮询时间就越长。 poll==>时间复杂度O(n) poll本质上和select没有区别，它将用户传入的数组拷贝到内核空间，然后查询每个fd对应的设备状态， 但是它没有最大连接数的限制，原因是它是基于链表来存储的. epoll
I/O 多路复用select，poll
cyz322649的博客
07-19 1359
select 是最早出现也是最通用的 I/O 多路复用机制，几乎所有操作系统都支持它。工作原理你提供三组文件描述符集合（一个用于读事件，一个用于写事件，一个用于异常事件）。select 会阻塞等待，直到这些集合中的任何一个文件描述符准备好进行 I/O 操作（比如有数据可读、可写或者发生错误）。当 select 返回时，它会修改这三个集合，只留下那些已经就绪的文件描述符。你需要遍历所有文件描述符，才能知道具体是哪些就绪了。优点可移植性好：几乎所有 Unix-like 系统都支持。
Linux I/O 多路复用之select、poll、epoll详解与代码示例
彼此当年少，莫负好时光
06-27 2951
如果写过最基础的TCP服务，那就应该清楚 accept 和 recv 函数是阻塞式的（默认），也就是说程序就卡在这个地方等待，直到有连接或者数据来到。如果不用多线程的话，一旦有数据到来就会一直处理这个连接的数据，而没法接收新的连接。其实操作系统可以在一个线程里轮询式处理这些事务，也就是常说的I/O多路复用。 select，poll，epoll 都是I/O多路复用的机制。I/O多路复用就是通过一种机制，一个进程可以监视多个描述符，一旦某个描述符就绪（一般是读就绪或者写就绪），能够通知程序进行相应的读写操作。s
I/O多路复用详解：select、poll、epoll、高性能服务器
比较是偷走幸福的小偷
10-27 2887
I/O多路复用是高性能网络编程的核心技术。为什么多线程处理连接会性能瓶颈？select和poll有什么区别？epoll为什么比select快？水平触发和边缘触发有什么不同？理解I/O多路复用的原理、select的fd_set限制、poll的改进、epoll的事件驱动、C10K问题的解决方案，才能掌握高性能I/O的本质。从"服务器并发连接数受限"问题出发，剖析I/O多路复用的核心原理。
【C++ 网络编程】一篇文章搞懂I/O多路复用（select、poll、epoll）
最新发布
2402_88083295的博客
02-25 1177
I/O多路复用是一种高效的网络通信机制，允许单线程同时监控多个文件描述符的状态变化。常见的实现方式包括select、poll和epoll，其中select跨平台支持，poll和epoll为Linux特有。相比多进程/多线程并发，I/O多路复用系统开销更小，无需创建额外进程/线程。 select通过位图结构fd_set管理文件描述符集合，支持检测读写缓冲区状态，但存在1024的文件描述符上限。poll使用pollfd结构体数组，无描述符数量限制，但两者都存在用户态与内核态数据拷贝的开销问题。 使用流程包括初始
linux下的各种I/O多路复用详解---select/poll/epoll
ITOfDragon的博客
10-22 1198
对linux下的各种I/O多路复用技术的详细介绍和对比,select/poll/epoll
AUTOSAR MCAL开发及EB Tresos工具使用总结
liuxu324的博客
08-18 2511
在基于AutoSar CP架构开发MCAL时，会使用到EB tresos工具。本文主要对MCAL开发及EB tresos工具使用进行总结，仅作为自学使用，以方便后续查漏补缺。
zemax案例（英文）-2
Rays are used to model the propagation of light through optical systems. For homogeneous,isotropic media, such as common optical glass, rays are straight lines. Rays are normal to the localwavefront and point along the direction of energy flow. Rays have position, direction, amplitude, phase,and possibly polarization data associated with them.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值