讲讲libevent底层机制

news2026/5/23 23:15:26
在 Linux 高并发网络编程领域libevent是最经典、最老牌的事件驱动 IO 库Nginx、Redis、memcached、Tor 等知名项目都基于它二次开发。它封装了select/poll/epoll/kqueue等 IO 复用接口实现了统一的事件驱动模型、定时器、信号处理是理解 Reactor 模式、高性能网络框架的最佳入门库。本文从底层原理、核心结构、事件调度、定时器实现、核心流程、优缺点等维度完整拆解 libevent 底层机制结合你之前学过的 IO 复用、栈、队列知识彻底吃透。一、libevent 核心定位与核心思想1.1 核心定位libevent 是跨平台、事件驱动、非阻塞 IO的网络库核心解决 3 个问题屏蔽不同系统 IO 复用差异Linux 用 epoll、Windows 用 select、BSD 用 kqueue提供统一 API实现Reactor 反应堆模式单线程处理海量 IO 事件内置定时器、信号事件、IO 事件统一调度。1.2 核心思想事件驱动 回调函数libevent 不主动轮询而是等待事件就绪后自动执行提前注册的回调函数。IO 事件socket 可读、可写、异常定时事件时间到了触发信号事件收到系统信号触发一句话注册事件 → 等待就绪 → 执行回调全程非阻塞、单线程高效调度。二、libevent 四大核心底层结构底层骨架libevent 的底层完全基于你学过的链表、队列、栈实现核心 4 个结构体层层嵌套2.1event_base反应堆核心总控制器整个 libevent 的调度核心相当于事件大管家包含底层 IO 复用句柄epoll/select/poll 的文件描述符事件队列注册的 IO 事件、定时事件、信号事件就绪队列epoll 返回的就绪事件双向链表实现定时器最小堆管理所有定时事件信号事件链表统一处理系统信号所有事件都注册到 event_base由它统一调度分发。2.2event单个事件对象最小单元每一个需要监听的事件IO、定时、信号都是一个event结构体核心成员fd监听的文件描述符socketfd / 信号events监听的事件类型读 EV_READ、写 EV_WRITE、定时 EV_TIMEOUTcallback事件就绪后执行的回调函数arg回调函数的参数链表节点挂载到 event_base 的事件链表中2.3 事件队列双向循环链表实现libevent 用双向循环链表管理所有事件分 3 类队列注册队列所有注册但未就绪的事件就绪队列IO 复用返回的就绪事件优先调度链表遍历激活队列即将执行回调的事件你之前学的双向循环链表就是 libevent 事件管理的底层结构保证任意位置增删 O (1)。2.4 定时器最小堆优先队列实现libevent 不用遍历链表找最近定时器而是用最小堆堆顶永远是最近要触发的定时事件插入、删除、获取最近时间时间复杂度 O (logn)每次 IO 复用阻塞超时时间由堆顶最近定时事件决定三、libevent 核心底层工作流程完整调度链路整个流程完全基于IO 复用 事件驱动5 步闭环和 epoll 工作逻辑高度契合步骤 1初始化反应堆event_base_new()自动检测系统支持的最优 IO 复用Linux 优先 epoll初始化事件链表、就绪队列、定时器最小堆创建 epoll 实例开辟内核事件表。步骤 2创建并注册事件event_new() event_add()创建event对象绑定 fd、监听事件读 / 写、回调函数event_add()把事件注册到IO 复用内核epoll_ctl同时挂载到注册链表IO 事件添加到 epoll 监听集合定时事件插入定时器最小堆信号事件注册系统信号处理。步骤 3事件循环event_base_dispatch()核心死循环while(1) { // 1. 获取最近要触发的定时器时间作为epoll_wait超时时间 int timeout get_min_timer_time(); // 2. 调用IO复用epoll_wait阻塞等待事件就绪 epoll_wait(epfd, 就绪事件数组, max, timeout); // 3. 将就绪事件放入就绪队列 将就绪fd对应的event移动到就绪队列; // 4. 遍历就绪队列执行回调函数 遍历就绪队列挨个调用event的callback; // 5. 处理到期的定时事件 检查最小堆触发超时的定时事件回调; }步骤 4回调函数执行事件就绪后自动执行你注册的回调函数读数据、处理业务、发送响应。步骤 5循环往复回调执行完成后回到epoll_wait继续等待下一轮事件单线程全程循环。四、IO 事件、定时器、信号事件底层实现细节4.1 IO 事件基于 epoll/select/pollLinux 平台底层直接封装epoll用水平触发 LT 模式默认就绪事件通过 epoll_wait 返回直接放入就绪队列事件可设置持久触发一次就绪后自动重新注册到 epoll持续监听。4.2 定时事件最小堆 时间轮基础版最小堆高效获取最近定时器高性能版时间轮libevent2 优化海量定时器场景效率高于最小堆定时器精度毫秒级通过 epoll_wait 的超时时间触发。4.3 信号事件统一信号处理所有信号统一注册一个全局信号处理函数收到信号后将就绪的信号事件加入就绪队列在事件循环内执行回调避免信号处理函数中执行复杂逻辑保证线程安全。五、libevent 的 Reactor 模式单线程反应堆libevent 是单线程 Reactor的标准实现核心逻辑一个线程一个event_base一个 epoll 实例监听海量 fd事件就绪后在当前线程执行回调全程无多线程竞争无需加锁性能极高。多线程场景创建多个event_base多 Reactor每个线程一个反应堆负载均衡分发连接实现高并发。六、底层用到的数据结构和你之前学的一一对应双向循环链表管理注册事件、就绪事件、信号事件增删 O (1)最小堆优先队列定时器管理快速获取最近超时事件队列就绪事件调度先进先出栈内部内存池、回调函数调用栈复用栈后进先出特性IO 复用epoll/poll/select单线程监听海量 fd。七、libevent 优缺点面试必背✅ 优点跨平台自动适配 Linux/Windows/macOS/BSD屏蔽 IO 复用差异事件驱动非阻塞单线程支持十万级并发内存占用极低功能全面IO、定时器、信号、异步 DNS、HTTP 服务一站式支持成熟稳定20 年开源库工业级验证无重大 bug接口简洁封装底层细节新手快速上手。❌ 缺点单线程回调阻塞致命回调函数不能执行耗时操作数据库查询、复杂计算否则阻塞整个事件循环默认 LT 水平触发相比 ET 边缘触发并发上限略低于 Nginx多线程支持弱原生单线程多线程需要手动实现多 Reactor定时器精度一般毫秒级不适合高精度定时场景。八、libevent 与 Nginx 底层对比libevent通用事件库单线程 ReactorLT 触发接口通用适合业务开发Nginx专用 web 服务器多进程 多 ReactorET 边缘触发性能极致适合网关、反向代理。九、全文总结面试背诵版libevent 是跨平台事件驱动非阻塞 IO 库底层封装 epoll/select/poll实现 Reactor 模式核心结构event_base反应堆event事件 双向循环链表事件管理 最小堆定时器核心流程初始化反应堆 → 注册事件 → 事件循环 IO 复用等待 → 就绪执行回调定时器用最小堆实现IO 事件依赖系统 IO 复用信号事件统一调度优点是跨平台、并发高、稳定缺点是回调不能阻塞、多线程支持弱底层大量使用链表、队列、堆、栈等基础数据结构是网络编程的综合实践。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2639142.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

SpringBoot-17-MyBatis动态SQL标签之常用标签

文章目录 1 代码1.1 实体User.java1.2 接口UserMapper.java1.3 映射UserMapper.xml1.3.1 标签if1.3.2 标签if和where1.3.3 标签choose和when和otherwise1.4 UserController.java2 常用动态SQL标签2.1 标签set2.1.1 UserMapper.java2.1.2 UserMapper.xml2.1.3 UserController.ja…

wordpress后台更新后 前端没变化的解决方法

使用siteground主机的wordpress网站,会出现更新了网站内容和修改了php模板文件、js文件、css文件、图片文件后,网站没有变化的情况。 不熟悉siteground主机的新手,遇到这个问题,就很抓狂,明明是哪都没操作错误&#x…

网络编程(Modbus进阶)

思维导图 Modbus RTU(先学一点理论) 概念 Modbus RTU 是工业自动化领域 最广泛应用的串行通信协议,由 Modicon 公司(现施耐德电气)于 1979 年推出。它以 高效率、强健性、易实现的特点成为工业控制系统的通信标准。 包…

UE5 学习系列(二)用户操作界面及介绍

这篇博客是 UE5 学习系列博客的第二篇,在第一篇的基础上展开这篇内容。博客参考的 B 站视频资料和第一篇的链接如下: 【Note】:如果你已经完成安装等操作,可以只执行第一篇博客中 2. 新建一个空白游戏项目 章节操作,重…

IDEA运行Tomcat出现乱码问题解决汇总

最近正值期末周,有很多同学在写期末Java web作业时,运行tomcat出现乱码问题,经过多次解决与研究,我做了如下整理: 原因: IDEA本身编码与tomcat的编码与Windows编码不同导致,Windows 系统控制台…

利用最小二乘法找圆心和半径

#include <iostream> #include <vector> #include <cmath> #include <Eigen/Dense> // 需安装Eigen库用于矩阵运算 // 定义点结构 struct Point { double x, y; Point(double x_, double y_) : x(x_), y(y_) {} }; // 最小二乘法求圆心和半径 …

使用docker在3台服务器上搭建基于redis 6.x的一主两从三台均是哨兵模式

一、环境及版本说明 如果服务器已经安装了docker,则忽略此步骤,如果没有安装,则可以按照一下方式安装: 1. 在线安装(有互联网环境): 请看我这篇文章 传送阵>> 点我查看 2. 离线安装(内网环境):请看我这篇文章 传送阵>> 点我查看 说明&#xff1a;假设每台服务器已…

XML Group端口详解

在XML数据映射过程中&#xff0c;经常需要对数据进行分组聚合操作。例如&#xff0c;当处理包含多个物料明细的XML文件时&#xff0c;可能需要将相同物料号的明细归为一组&#xff0c;或对相同物料号的数量进行求和计算。传统实现方式通常需要编写脚本代码&#xff0c;增加了开…

LBE-LEX系列工业语音播放器|预警播报器|喇叭蜂鸣器的上位机配置操作说明

LBE-LEX系列工业语音播放器|预警播报器|喇叭蜂鸣器专为工业环境精心打造&#xff0c;完美适配AGV和无人叉车。同时&#xff0c;集成以太网与语音合成技术&#xff0c;为各类高级系统&#xff08;如MES、调度系统、库位管理、立库等&#xff09;提供高效便捷的语音交互体验。 L…

(LeetCode 每日一题) 3442. 奇偶频次间的最大差值 I (哈希、字符串)

题目&#xff1a;3442. 奇偶频次间的最大差值 I 思路 &#xff1a;哈希&#xff0c;时间复杂度0(n)。 用哈希表来记录每个字符串中字符的分布情况&#xff0c;哈希表这里用数组即可实现。 C版本&#xff1a; class Solution { public:int maxDifference(string s) {int a[26]…

【大模型RAG】拍照搜题技术架构速览:三层管道、两级检索、兜底大模型

摘要 拍照搜题系统采用“三层管道&#xff08;多模态 OCR → 语义检索 → 答案渲染&#xff09;、两级检索&#xff08;倒排 BM25 向量 HNSW&#xff09;并以大语言模型兜底”的整体框架&#xff1a; 多模态 OCR 层 将题目图片经过超分、去噪、倾斜校正后&#xff0c;分别用…

【Axure高保真原型】引导弹窗

今天和大家中分享引导弹窗的原型模板&#xff0c;载入页面后&#xff0c;会显示引导弹窗&#xff0c;适用于引导用户使用页面&#xff0c;点击完成后&#xff0c;会显示下一个引导弹窗&#xff0c;直至最后一个引导弹窗完成后进入首页。具体效果可以点击下方视频观看或打开下方…

接口测试中缓存处理策略

在接口测试中&#xff0c;缓存处理策略是一个关键环节&#xff0c;直接影响测试结果的准确性和可靠性。合理的缓存处理策略能够确保测试环境的一致性&#xff0c;避免因缓存数据导致的测试偏差。以下是接口测试中常见的缓存处理策略及其详细说明&#xff1a; 一、缓存处理的核…

龙虎榜——20250610

上证指数放量收阴线&#xff0c;个股多数下跌&#xff0c;盘中受消息影响大幅波动。 深证指数放量收阴线形成顶分型&#xff0c;指数短线有调整的需求&#xff0c;大概需要一两天。 2025年6月10日龙虎榜行业方向分析 1. 金融科技 代表标的&#xff1a;御银股份、雄帝科技 驱动…

观成科技:隐蔽隧道工具Ligolo-ng加密流量分析

1.工具介绍 Ligolo-ng是一款由go编写的高效隧道工具&#xff0c;该工具基于TUN接口实现其功能&#xff0c;利用反向TCP/TLS连接建立一条隐蔽的通信信道&#xff0c;支持使用Let’s Encrypt自动生成证书。Ligolo-ng的通信隐蔽性体现在其支持多种连接方式&#xff0c;适应复杂网…

铭豹扩展坞 USB转网口 突然无法识别解决方法

当 USB 转网口扩展坞在一台笔记本上无法识别,但在其他电脑上正常工作时,问题通常出在笔记本自身或其与扩展坞的兼容性上。以下是系统化的定位思路和排查步骤,帮助你快速找到故障原因: 背景: 一个M-pard(铭豹)扩展坞的网卡突然无法识别了,扩展出来的三个USB接口正常。…

未来机器人的大脑:如何用神经网络模拟器实现更智能的决策?

编辑&#xff1a;陈萍萍的公主一点人工一点智能 未来机器人的大脑&#xff1a;如何用神经网络模拟器实现更智能的决策&#xff1f;RWM通过双自回归机制有效解决了复合误差、部分可观测性和随机动力学等关键挑战&#xff0c;在不依赖领域特定归纳偏见的条件下实现了卓越的预测准…

Linux应用开发之网络套接字编程(实例篇)

服务端与客户端单连接 服务端代码 #include <sys/socket.h> #include <sys/types.h> #include <netinet/in.h> #include <stdio.h> #include <stdlib.h> #include <string.h> #include <arpa/inet.h> #include <pthread.h> …

华为云AI开发平台ModelArts

华为云ModelArts&#xff1a;重塑AI开发流程的“智能引擎”与“创新加速器”&#xff01; 在人工智能浪潮席卷全球的2025年&#xff0c;企业拥抱AI的意愿空前高涨&#xff0c;但技术门槛高、流程复杂、资源投入巨大的现实&#xff0c;却让许多创新构想止步于实验室。数据科学家…

深度学习在微纳光子学中的应用

深度学习在微纳光子学中的主要应用方向 深度学习与微纳光子学的结合主要集中在以下几个方向&#xff1a; 逆向设计 通过神经网络快速预测微纳结构的光学响应&#xff0c;替代传统耗时的数值模拟方法。例如设计超表面、光子晶体等结构。 特征提取与优化 从复杂的光学数据中自…