I/O 模型
I/O 模型描述调用者如何等待数据、发起读写并取得结果。以 Linux socket 为例,非阻塞读取在没有数据时会立即返回,但应用仍要自己再次调用读取;异步 I/O 则先提交操作,之后再取得完成结果。理解这一区别,才能解释非阻塞为什么不等于异步,以及事件通知之后还需要做什么。
1. 面试核心
先记住这几条,再读正文- socket 没有数据可读时,阻塞读取会等待,非阻塞读取则以
EAGAIN等错误返回,由应用稍后重试。卡 · 面试核心 - DMA 可以承担设备与内存之间的传输,但请求管理、驱动与协议处理仍需要 CPU;等待 I/O 的线程让出 CPU,不等于 I/O 不消耗 CPU。卡 · CPU、DMA 与设备完成
- 就绪通知后还要执行读写;完成通知则交付此前已提交操作的结果,两者处在不同阶段。
- 对正长度的 TCP
recv,正数表示读到的字节数,0 表示对端已关闭发送方向且数据已读完,EAGAIN只表示暂时没数据。卡 · 读取结果与部分写入 send可能只接受一部分字节,应用要保留尚未发送的部分,等可写后继续发送。
2. 等待数据与执行读取
一次网络读取要分清两件事:数据是否已经进入接收缓冲区,以及应用是否已经把字节读出来。网络数据经协议栈进入缓冲区后,应用还要调用 read 或 recv 才能取得它。
阻塞 I/O 允许调用在数据暂不可用时等待,让线程停在这次读取上。非阻塞 I/O 则不等待数据到来:socket 设置 O_NONBLOCK 后,如果当前没有数据,就返回暂不可用的错误。
非阻塞改变的是没数据时的行为。真正读到数据时,结果仍由本次系统调用返回,而且一次读取可能只拿到应用所需数据的一部分。
TCP 的消息拆分由应用协议负责,见 RPC。
2.1 CPU、DMA 与设备完成
DMA(Direct Memory Access,直接内存访问)让设备与主存之间的数据传输不必由 CPU 逐字搬运,但 I/O 的发起、驱动处理、协议解析和结果交付仍需要 CPU。把「设备传输阶段可以交给 DMA」说成「I/O 不需要 CPU」,会漏掉这些工作。
以 Linux 上普通缓冲文件读取为例,页缓存命中时,可以直接从内存中的缓存取得数据,不一定触发磁盘读取;缓存未命中时,CPU 执行文件系统和驱动代码,准备请求与 DMA 缓冲区映射,设备再把数据传入内存。设备完成后,内核处理完成状态、更新缓存并使等待任务可以继续;普通 read 还要把结果交给用户缓冲区。数据搬运与线程等待是两个问题:线程等待设备时可以让出 CPU,CPU 仍可运行别的任务。
典型网络接收则由网卡把收到的数据放入内存中的接收缓冲,CPU 执行驱动与协议栈代码,检查并把数据交给相应 socket,应用再通过 recv 取得数据。网络还涉及分组、协议状态与对端行为,不能把它简化成「读取某个磁盘偏移」;普通文件的页缓存与 socket 接收缓冲也不是同一种对象。
中断用来通知 CPU 有设备事件需要处理;轮询则是 CPU 主动检查完成状态。实际系统可以组合两者,例如 Linux 网络 NAPI 可以先由中断触发,再批量轮询处理数据包。因此,不要把每个数据包都想成必然产生一次独立中断,也不要把 DMA 与中断当成互斥的两种 I/O 模型:前者负责传输,后者负责通知。
上面是帮助理解职责的常见路径,不是所有设备都固定执行相同次数的复制。直接 I/O、内存映射、零拷贝或设备卸载会改变路径,但不会自动消除请求管理、完成处理和应用计算。磁盘和网络都可能使用 DMA;阻塞、非阻塞、就绪与完成仍应从应用所用接口判断。
3. 就绪与完成
就绪通知告诉应用现在可以尝试读写,操作还要由应用发起;完成通知则告诉应用,之前提交的操作已经结束,可以查看结果。两种流程的区别如下:
就绪模型:等待可读 → 调用 recv → 使用返回字节
完成模型:提交读取 → 获取完成结果 → 使用结果缓冲区
| 模型 | 调用者行为 |
|---|---|
| 阻塞 I/O | 调用时等待数据与操作结果。 |
| 非阻塞 I/O | 暂不可用时返回,调用者稍后重试。 |
| I/O 多路复用 | 等待多个对象就绪,再执行读写。 |
| 信号驱动 I/O | 通过信号获知 I/O 就绪,再执行读写。 |
| 异步 I/O | 提交操作,再通过完成机制取得结果。 |
Reactor 是分派就绪事件的模型,事件处理器收到通知后调用读写接口。Proactor 分派的是操作完成结果,处理器接手结果继续工作。
这描述的是应用看到的接口:一个库也可以让线程池执行阻塞操作,完成后再通知调用方。因此,看到回调或异步接口,还不能据此认定内核采用了哪种 I/O 方式。
Linux io_uring 通过提交队列接收操作,通过完成队列交付结果。应用提交读取后,操作可能还在使用缓冲区,所以必须让缓冲区保持有效,收到对应完成结果后才能安全复用。
4. 读取结果与部分写入
判断一次读取发生了什么,要看返回值和错误码。下面针对请求读取长度大于 0 的 TCP recv:
| 返回值 | 含义与处理 |
|---|---|
| 大于 0 | 取得部分或全部可读字节,交给协议缓冲区。 |
| 等于 0 | 对端有序关闭发送方向,且此前数据已读完。 |
| -1,EAGAIN / EWOULDBLOCK | 当前无可读数据,回到事件等待。 |
| -1,EINTR | 操作在返回数据前被信号中断,可按取消策略重试。 |
| 其他错误 | 按具体错误清理或恢复连接。 |
表中的 0 不能直接套到 UDP 上。UDP 允许零长度数据报,recv 返回 0 也可能只是收到了一个空数据报,并不表示连接结束。解释返回值前,要先明确 socket 类型。
写入也要检查实际接受了多少字节。例如准备发送 1000 字节,非阻塞 send 返回 300,表示内核只接受了前 300 字节,剩余 700 字节要保留,等可写后继续发送。如果返回 EAGAIN,则保留全部尚未发送的数据。
5. 使用边界
没有数据时不断重试 EAGAIN,线程仍会占着 CPU 做无用检查。用事件等待可以让它在没有工作时休眠,有就绪事件再继续。事件循环中的处理也应保持短小,慢业务交给其他执行资源,否则一个处理器就会拖住其他连接。
socket 的非阻塞规则不能直接套用到普通文件。Linux 普通文件上的 O_NONBLOCK 不会消除磁盘等待,读写需要等待设备时仍可能阻塞。因此,讨论非阻塞必须说明操作对象和系统调用。
6. 面试题卡片
7. 参考资料
- Linux man-pages:recv
- Linux man-pages:aio
- Linux man-pages:read(2)
- Linux man-pages:send(2)
- Linux man-pages:open(2)
- Linux man-pages:io_uring(7)
- Boost.Asio:The Proactor Design Pattern
- Linux Kernel:Dynamic DMA mapping Guide
- Linux Kernel:NAPI
- OSTEP:I/O Devices
来源:Coding 101 原文 · 免费阅读,引用请保留出处。内容使用说明