Linux 五大 I/O 模型深度解析

news2026/4/3 8:39:24
在构建高并发、高性能的后端系统时如各种中间件、Web 服务器我们不可避免地会接触到 I/OInput/Output模型。很多开发者对 BIO、NIO、AIO 以及多路复用等概念感到混淆。要真正从底层掌握这些模型我们需要褪去表层的框架封装回到操作系统的本质。本文将以严谨、清晰的技术视角全面梳理 Linux 系统下的五种经典 I/O 模型。一、 核心基石搞懂两个阶段与两对概念在探讨具体的 I/O 模型之前必须明确操作系统进行一次网络 I/O以读操作 read 为例所必须经历的两个关键阶段第一阶段等待数据准备就绪Waiting for the data to be ready。例如等待网络上的数据包到达网卡并被复制到操作系统的内核缓冲区Kernel Space。第二阶段将数据从内核拷贝到用户进程Copying the data from the kernel to the process。将内核缓冲区的数据拷贝到应用程序的内存空间User Space。基于这两个阶段我们才能准确定义以下两对常被混淆的概念阻塞Blocking与 非阻塞Non-blocking这主要关注的是第一阶段。在请求数据时如果数据没准备好当前线程是被挂起死等阻塞还是直接返回一个错误标志继续往下执行非阻塞。同步Synchronous与 异步Asynchronous这主要关注的是第二阶段。在进行内核到用户空间的数据拷贝时如果是用户线程自己主动去执行拷贝并被阻塞就是同步如果是由操作系统在后台完成拷贝再通知用户线程直接使用数据就是异步。理解了这些我们来看 UNIX 网络编程中定义的 5 种 I/O 模型。1. 同步阻塞 I/O (Blocking I/O - BIO)这是最传统、最基础的 I/O 模型。工作机制当用户进程发起 recvfrom 系统调用时进入内核态。如果这个时候网络数据还没到用户进程就会进入阻塞状态交出 CPU 执行权。直到数据到达内核缓冲区并且操作系统将数据成功拷贝到用户空间后这个系统调用才返回用户进程解除阻塞。特点在 I/O 执行的两个阶段都被阻塞。应用场景传统的 Java java.io 包。通常采用“一连接一线程”的模式One Thread per Connection。痛点在面对成千上万的并发连接时需要创建等量的线程线程的上下文切换开销极大容易导致系统资源耗尽。2. 同步非阻塞 I/O (Non-blocking I/O)为了解决线程被挂起等待的问题引入了非阻塞模型。工作机制用户进程发起 recvfrom 调用时如果内核数据还没准备好操作系统不会挂起线程而是立刻返回一个 EWOULDBLOCK 错误码。用户进程收到错误后知道数据没好可以去干点别的但通常会通过一个 while 循环不断地再次重试发起调用称为轮询 Polling。直到某次轮询时数据准备好了它就会阻塞在第二阶段等待数据拷贝完成。特点第一阶段不阻塞第二阶段阻塞。痛点虽然线程没有被挂起但频繁的系统调用和死循环轮询会极大地白白消耗 CPU 资源。在实际的高并发生产环境中这种纯粹的非阻塞 I/O 直接使用的概率极低。3. I/O 多路复用 (I/O Multiplexing)这是目前现代高并发系统最核心的基础模型大名鼎鼎的 Linux epoll、Java NIO、Redis、Nginx 的底层均是基于此模型实现。工作机制它引入了一个“代理”即 select、poll 或 epoll 系统调用。用户进程将自己关注的多个文件描述符FD可以理解为多个网络连接全部注册到这个代理上。此时单个用户线程阻塞在 select/epoll 调用上。只要这批连接中有一个或多个连接的数据到达了epoll 就会返回通知用户进程。随后用户进程再发起真正的 recvfrom 系统调用阻塞在第二阶段去拷贝数据。特点看似和阻塞 I/O 差不多甚至还多了一次系统调用。但它的核心优势在于一个线程可以同时监听和管理成千上万个连接。总结它是 Reactor 架构模式的基石。第一阶段阻塞在多路复用器上而不是具体的 I/O 调用上第二阶段依然同步阻塞在数据拷贝上。4. 信号驱动 I/O (Signal-Driven I/O)这是一个相对冷门的模型。工作机制用户进程向内核注册一个信号处理函数并立即返回线程继续执行其他任务第一阶段完全不阻塞。当内核数据准备就绪时操作系统会向该进程发送一个 SIGIO 信号。用户进程收到信号后在信号处理函数中发起 recvfrom 系统调用开始第二阶段的数据拷贝此时是阻塞的。特点第一阶段通过事件通知机制避免了阻塞和轮询第二阶段同步阻塞。痛点在 TCP 协议中产生信号的条件非常多且复杂导致该模型难以被广泛应用通常多用于 UDP 通信。5. 异步 I/O (Asynchronous I/O - AIO)这是理论上最高效的 I/O 模型实现了真正的全异步。工作机制用户进程发起 aio_read 调用后立刻返回去做其他事情完全不阻塞。操作系统内核接管了后续的所有工作它不仅负责等待数据到达还负责将数据从内核空间拷贝到用户空间。当这一切全部完成后内核会主动给用户进程发送一个通知如触发回调函数告诉进程“数据已经放在你的内存里了直接用吧”。特点在 I/O 的两个阶段都不阻塞。用户进程彻底从 I/O 操作中解放出来。这是 Proactor 架构模式的基础。现状Windows 系统通过 IOCP 提供了完善的 AIO 支持但在 Linux 系统下AIO 的演进较为缓慢传统的 glibc AIO 多是基于用户态线程池模拟的直到近些年 io_uring 的出现Linux 才有了一个真正高性能的内核级异步 I/O 方案。因此目前主流的 Linux 后端应用如 Netty仍以 I/O 多路复用为主。二、 总结与对比为了应对面试或技术选型我们可以通过以下判断逻辑来区分这 5 种模型看“第二阶段”数据拷贝阶段是否阻塞只要线程需要自己去调用 recvfrom 并在此期间被阻塞那就是同步 I/O包含 BIO、NIO、多路复用、信号驱动。如果数据拷贝全由内核代劳线程完全不阻塞那就是异步 I/OAIO。(注这是很多开发者容易踩坑的地方I/O 多路复用本质上依然属于同步 I/O 模型)。看主流应用落地低并发、简单业务BIO 代码最直观易于维护。高并发、海量连接毫不犹豫选择基于 epoll 的I/O 多路复用。它是当前工业界落地最成熟、性价比最高的方案兼顾了性能与实现的复杂度。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2478265.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

SpringBoot-17-MyBatis动态SQL标签之常用标签

文章目录 1 代码1.1 实体User.java1.2 接口UserMapper.java1.3 映射UserMapper.xml1.3.1 标签if1.3.2 标签if和where1.3.3 标签choose和when和otherwise1.4 UserController.java2 常用动态SQL标签2.1 标签set2.1.1 UserMapper.java2.1.2 UserMapper.xml2.1.3 UserController.ja…

wordpress后台更新后 前端没变化的解决方法

使用siteground主机的wordpress网站,会出现更新了网站内容和修改了php模板文件、js文件、css文件、图片文件后,网站没有变化的情况。 不熟悉siteground主机的新手,遇到这个问题,就很抓狂,明明是哪都没操作错误&#x…

网络编程(Modbus进阶)

思维导图 Modbus RTU(先学一点理论) 概念 Modbus RTU 是工业自动化领域 最广泛应用的串行通信协议,由 Modicon 公司(现施耐德电气)于 1979 年推出。它以 高效率、强健性、易实现的特点成为工业控制系统的通信标准。 包…

UE5 学习系列(二)用户操作界面及介绍

这篇博客是 UE5 学习系列博客的第二篇,在第一篇的基础上展开这篇内容。博客参考的 B 站视频资料和第一篇的链接如下: 【Note】:如果你已经完成安装等操作,可以只执行第一篇博客中 2. 新建一个空白游戏项目 章节操作,重…

IDEA运行Tomcat出现乱码问题解决汇总

最近正值期末周,有很多同学在写期末Java web作业时,运行tomcat出现乱码问题,经过多次解决与研究,我做了如下整理: 原因: IDEA本身编码与tomcat的编码与Windows编码不同导致,Windows 系统控制台…

利用最小二乘法找圆心和半径

#include <iostream> #include <vector> #include <cmath> #include <Eigen/Dense> // 需安装Eigen库用于矩阵运算 // 定义点结构 struct Point { double x, y; Point(double x_, double y_) : x(x_), y(y_) {} }; // 最小二乘法求圆心和半径 …

使用docker在3台服务器上搭建基于redis 6.x的一主两从三台均是哨兵模式

一、环境及版本说明 如果服务器已经安装了docker,则忽略此步骤,如果没有安装,则可以按照一下方式安装: 1. 在线安装(有互联网环境): 请看我这篇文章 传送阵>> 点我查看 2. 离线安装(内网环境):请看我这篇文章 传送阵>> 点我查看 说明&#xff1a;假设每台服务器已…

XML Group端口详解

在XML数据映射过程中&#xff0c;经常需要对数据进行分组聚合操作。例如&#xff0c;当处理包含多个物料明细的XML文件时&#xff0c;可能需要将相同物料号的明细归为一组&#xff0c;或对相同物料号的数量进行求和计算。传统实现方式通常需要编写脚本代码&#xff0c;增加了开…

LBE-LEX系列工业语音播放器|预警播报器|喇叭蜂鸣器的上位机配置操作说明

LBE-LEX系列工业语音播放器|预警播报器|喇叭蜂鸣器专为工业环境精心打造&#xff0c;完美适配AGV和无人叉车。同时&#xff0c;集成以太网与语音合成技术&#xff0c;为各类高级系统&#xff08;如MES、调度系统、库位管理、立库等&#xff09;提供高效便捷的语音交互体验。 L…

(LeetCode 每日一题) 3442. 奇偶频次间的最大差值 I (哈希、字符串)

题目&#xff1a;3442. 奇偶频次间的最大差值 I 思路 &#xff1a;哈希&#xff0c;时间复杂度0(n)。 用哈希表来记录每个字符串中字符的分布情况&#xff0c;哈希表这里用数组即可实现。 C版本&#xff1a; class Solution { public:int maxDifference(string s) {int a[26]…

【大模型RAG】拍照搜题技术架构速览:三层管道、两级检索、兜底大模型

摘要 拍照搜题系统采用“三层管道&#xff08;多模态 OCR → 语义检索 → 答案渲染&#xff09;、两级检索&#xff08;倒排 BM25 向量 HNSW&#xff09;并以大语言模型兜底”的整体框架&#xff1a; 多模态 OCR 层 将题目图片经过超分、去噪、倾斜校正后&#xff0c;分别用…

【Axure高保真原型】引导弹窗

今天和大家中分享引导弹窗的原型模板&#xff0c;载入页面后&#xff0c;会显示引导弹窗&#xff0c;适用于引导用户使用页面&#xff0c;点击完成后&#xff0c;会显示下一个引导弹窗&#xff0c;直至最后一个引导弹窗完成后进入首页。具体效果可以点击下方视频观看或打开下方…

接口测试中缓存处理策略

在接口测试中&#xff0c;缓存处理策略是一个关键环节&#xff0c;直接影响测试结果的准确性和可靠性。合理的缓存处理策略能够确保测试环境的一致性&#xff0c;避免因缓存数据导致的测试偏差。以下是接口测试中常见的缓存处理策略及其详细说明&#xff1a; 一、缓存处理的核…

龙虎榜——20250610

上证指数放量收阴线&#xff0c;个股多数下跌&#xff0c;盘中受消息影响大幅波动。 深证指数放量收阴线形成顶分型&#xff0c;指数短线有调整的需求&#xff0c;大概需要一两天。 2025年6月10日龙虎榜行业方向分析 1. 金融科技 代表标的&#xff1a;御银股份、雄帝科技 驱动…

观成科技:隐蔽隧道工具Ligolo-ng加密流量分析

1.工具介绍 Ligolo-ng是一款由go编写的高效隧道工具&#xff0c;该工具基于TUN接口实现其功能&#xff0c;利用反向TCP/TLS连接建立一条隐蔽的通信信道&#xff0c;支持使用Let’s Encrypt自动生成证书。Ligolo-ng的通信隐蔽性体现在其支持多种连接方式&#xff0c;适应复杂网…

铭豹扩展坞 USB转网口 突然无法识别解决方法

当 USB 转网口扩展坞在一台笔记本上无法识别,但在其他电脑上正常工作时,问题通常出在笔记本自身或其与扩展坞的兼容性上。以下是系统化的定位思路和排查步骤,帮助你快速找到故障原因: 背景: 一个M-pard(铭豹)扩展坞的网卡突然无法识别了,扩展出来的三个USB接口正常。…

未来机器人的大脑:如何用神经网络模拟器实现更智能的决策?

编辑&#xff1a;陈萍萍的公主一点人工一点智能 未来机器人的大脑&#xff1a;如何用神经网络模拟器实现更智能的决策&#xff1f;RWM通过双自回归机制有效解决了复合误差、部分可观测性和随机动力学等关键挑战&#xff0c;在不依赖领域特定归纳偏见的条件下实现了卓越的预测准…

Linux应用开发之网络套接字编程(实例篇)

服务端与客户端单连接 服务端代码 #include <sys/socket.h> #include <sys/types.h> #include <netinet/in.h> #include <stdio.h> #include <stdlib.h> #include <string.h> #include <arpa/inet.h> #include <pthread.h> …

华为云AI开发平台ModelArts

华为云ModelArts&#xff1a;重塑AI开发流程的“智能引擎”与“创新加速器”&#xff01; 在人工智能浪潮席卷全球的2025年&#xff0c;企业拥抱AI的意愿空前高涨&#xff0c;但技术门槛高、流程复杂、资源投入巨大的现实&#xff0c;却让许多创新构想止步于实验室。数据科学家…

深度学习在微纳光子学中的应用

深度学习在微纳光子学中的主要应用方向 深度学习与微纳光子学的结合主要集中在以下几个方向&#xff1a; 逆向设计 通过神经网络快速预测微纳结构的光学响应&#xff0c;替代传统耗时的数值模拟方法。例如设计超表面、光子晶体等结构。 特征提取与优化 从复杂的光学数据中自…