从零开始掌握libevent——2万字实战指南

news2026/3/25 12:31:23
1. libevent基础入门事件驱动的核心思想第一次接触libevent时我被它简洁的API设计惊艳到了。这个用C语言编写的高性能事件通知库完美解决了网络编程中最头疼的多路I/O复用问题。想象一下你正在经营一家餐厅传统的阻塞式IO就像服务员每次只能服务一桌客人而libevent则像是一位超级服务员能同时照看所有客人的需求。libevent的核心机制其实很简单它通过事件循环event loop不断检查注册的事件是否就绪。当某个文件描述符如socket上有数据可读、可写或者定时器超时libevent就会调用预先注册的回调函数。这种设计让单线程也能高效处理大量并发连接这正是memcached等知名软件选择它的原因。安装libevent非常简单以Ubuntu为例sudo apt-get install libevent-dev如果是源码编译最新稳定版2.1.12的编译流程如下wget https://github.com/libevent/libevent/releases/download/release-2.1.12-stable/libevent-2.1.12-stable.tar.gz tar -zxvf libevent-2.1.12-stable.tar.gz cd libevent-2.1.12-stable ./configure --prefix/usr/local make make install验证安装是否成功#include event2/event.h #include stdio.h int main() { const char **methods event_get_supported_methods(); printf(Supported methods:\n); for (int i0; methods[i] ! NULL; i) { printf( %s\n, methods[i]); } return 0; }这段代码会输出系统支持的多路IO机制比如epoll、kqueue等。我在实际项目中遇到过一个小坑如果在多线程环境下使用需要先调用evthread_use_pthreads()初始化线程支持。2. 事件处理核心API详解2.1 event_base事件循环的引擎event_base是libevent的核心结构相当于事件循环的发动机。创建方法很简单struct event_base *base event_base_new(); if (!base) { fprintf(stderr, Could not initialize libevent!\n); return 1; }不同系统支持不同的IO多路复用机制可以通过以下API查询// 获取当前base使用的后端 const char *method event_base_get_method(base); printf(Using %s\n, method); // 获取所有支持的后端 const char **methods event_get_supported_methods(); for (int i0; methods[i] ! NULL; i) { printf(Available: %s\n, methods[i]); }在实际项目中我曾遇到过一个性能问题默认情况下libevent会选择最快的后端但在某些特殊场景比如需要精确计时器可能需要强制使用epollstruct event_config *cfg event_config_new(); event_config_avoid_method(cfg, poll); event_config_avoid_method(cfg, select); base event_base_new_with_config(cfg);2.2 事件创建与管理事件是libevent的基本单位创建事件有两种方式传统方式兼容旧版本struct event *ev event_new(base, fd, EV_READ|EV_PERSIST, callback, arg);更安全的方式推荐struct event *ev event_new(base, fd, EV_READ|EV_PERSIST, callback, arg); event_assign(ev, base, fd, EV_READ|EV_PERSIST, callback, arg);关键参数说明fd监控的文件描述符events监控的事件类型EV_READ可读、EV_WRITE可写、EV_PERSIST持久化callback事件触发时的回调函数arg传递给回调函数的参数一个完整的TCP服务器示例void accept_cb(evutil_socket_t fd, short events, void *arg) { struct sockaddr_in client_addr; socklen_t len sizeof(client_addr); int client_fd accept(fd, (struct sockaddr*)client_addr, len); // 设置非阻塞 evutil_make_socket_nonblocking(client_fd); // 为新连接创建事件 struct event *client_ev event_new(base, client_fd, EV_READ|EV_PERSIST, read_cb, NULL); event_add(client_ev, NULL); } int main() { // 创建监听socket int listen_fd socket(AF_INET, SOCK_STREAM, 0); // ...绑定、监听等操作 // 创建监听事件 struct event *listen_ev event_new(base, listen_fd, EV_READ|EV_PERSIST, accept_cb, NULL); event_add(listen_ev, NULL); // 启动事件循环 event_base_dispatch(base); }2.3 事件循环的运行与控制启动事件循环有三种方式// 最简单的方式阻塞直到没有事件 event_base_dispatch(base); // 更灵活的方式 int flags 0; event_base_loop(base, flags); // 带超时的事件循环 struct timeval tv {5, 0}; // 5秒 event_base_loopexit(base, tv);控制循环的常用标志EVLOOP_ONCE只处理一轮事件EVLOOP_NONBLOCK非阻塞模式在实际项目中优雅退出很重要void signal_cb(evutil_socket_t sig, short events, void *arg) { struct event_base *base arg; struct timeval delay {2, 0}; // 2秒后退出 printf(Caught signal, exiting...\n); event_base_loopexit(base, delay); } // 注册信号事件 struct event *signal_ev evsignal_new(base, SIGINT, signal_cb, base); event_add(signal_ev, NULL);3. 高级功能bufferevent与连接监听器3.1 bufferevent带缓冲的事件处理bufferevent是libevent提供的高级抽象它内置了读写缓冲区大大简化了网络编程。创建一个基于socket的buffereventstruct bufferevent *bev bufferevent_socket_new( base, fd, BEV_OPT_CLOSE_ON_FREE );设置回调函数void read_cb(struct bufferevent *bev, void *ctx) { struct evbuffer *input bufferevent_get_input(bev); size_t len evbuffer_get_length(input); char *data malloc(len 1); evbuffer_remove(input, data, len); data[len] \0; printf(Received: %s\n, data); free(data); } bufferevent_setcb(bev, read_cb, NULL, event_cb, NULL); bufferevent_enable(bev, EV_READ|EV_WRITE);发送数据也很简单bufferevent_write(bev, Hello\n, 6);我在实际项目中遇到过缓冲区溢出的问题libevent提供了水位控制机制// 设置低水位当可读数据达到10字节时触发读回调 bufferevent_setwatermark(bev, EV_READ, 10, 0); // 设置高水位当待发送数据超过1024字节时停止写入 bufferevent_setwatermark(bev, EV_WRITE, 0, 1024);3.2 连接监听器evconnlistenerevconnlistener封装了TCP服务器的创建流程大大简化了代码void listener_cb(struct evconnlistener *listener, evutil_socket_t fd, struct sockaddr *sa, int socklen, void *user_data) { // 为新连接创建bufferevent struct bufferevent *bev bufferevent_socket_new( base, fd, BEV_OPT_CLOSE_ON_FREE); // ...设置回调等 } struct evconnlistener *listener evconnlistener_new_bind( base, listener_cb, NULL, LEV_OPT_REUSEABLE|LEV_OPT_CLOSE_ON_FREE, -1, (struct sockaddr*)sin, sizeof(sin));关键参数说明LEV_OPT_REUSEABLE启用SO_REUSEADDRLEV_OPT_CLOSE_ON_FREE释放时自动关闭socket最后两个参数指定绑定地址和端口4. 实战案例构建高性能HTTP服务器4.1 基础HTTP服务器libevent内置了HTTP支持下面是一个简单实现void http_request_cb(struct evhttp_request *req, void *arg) { struct evbuffer *buf evbuffer_new(); evbuffer_add_printf(buf, Hello, World!); evhttp_send_reply(req, HTTP_OK, OK, buf); evbuffer_free(buf); } int main() { struct event_base *base event_base_new(); struct evhttp *http evhttp_new(base); evhttp_bind_socket(http, 0.0.0.0, 8080); evhttp_set_gencb(http, http_request_cb, NULL); event_base_dispatch(base); evhttp_free(http); event_base_free(base); return 0; }4.2 路由与中间件实际项目中我们需要更复杂的路由void api_handler(struct evhttp_request *req, void *arg) { // 处理API请求 } void static_file_handler(struct evhttp_request *req, void *arg) { // 处理静态文件 } int main() { // ...初始化代码 // 设置路由 evhttp_set_cb(http, /api, api_handler, NULL); evhttp_set_cb(http, /static/, static_file_handler, NULL); // 默认回调 evhttp_set_gencb(http, default_handler, NULL); // ...启动事件循环 }4.3 性能优化技巧连接池管理重用bufferevent减少创建开销内存池预分配内存减少malloc调用事件优先级为不同事件设置优先级// 设置事件优先级数值越小优先级越高 event_priority_set(ev, 0); // 设置bufferevent优先级 bufferevent_priority_set(bev, 1);多线程模型每个线程一个event_basevoid *worker_thread(void *arg) { struct event_base *base event_base_new(); // ...初始化工作 event_base_dispatch(base); return NULL; } // 主线程 for (int i0; i4; i) { pthread_create(threads[i], NULL, worker_thread, NULL); }5. libevent内部机制深度解析5.1 事件处理流程libevent的核心处理流程如下初始化阶段创建event_base选择后端epoll/kqueue等事件注册通过event_add将事件添加到事件队列事件循环计算最近定时器到期时间调用epoll_wait/kqueue等等待事件处理就绪事件调用回调函数清理阶段释放资源5.2 定时器实现libevent使用最小堆管理定时器保证高效查询最近到期事件// 添加定时器 struct timeval tv {1, 500000}; // 1.5秒 struct event *ev event_new(base, -1, EV_TIMEOUT, timeout_cb, NULL); event_add(ev, tv); // 定时器回调 void timeout_cb(evutil_socket_t fd, short what, void *arg) { printf(Timer fired!\n); }5.3 缓冲区设计libevent的evbuffer采用链式存储设计解决了传统缓冲区的两大问题内存浪费按需分配内存块数据拷贝通过指针偏移避免频繁拷贝典型操作示例struct evbuffer *buf evbuffer_new(); // 添加数据 evbuffer_add(buf, Hello, 5); evbuffer_add_printf(buf, %s!, World); // 读取数据 size_t len evbuffer_get_length(buf); char *data malloc(len 1); evbuffer_remove(buf, data, len); data[len] \0; // 查找数据 evbuffer_ptr ptr; evbuffer_search(buf, World, 5, ptr);5.4 多线程支持libevent通过锁机制支持多线程但需要注意每个event_base只能在一个线程使用共享数据需要加锁// 初始化线程支持 evthread_use_pthreads(); // 创建线程安全的bufferevent struct bufferevent *bev bufferevent_socket_new( base, fd, BEV_OPT_THREADSAFE);我在实际项目中遇到过死锁问题解决方案是避免在回调中执行耗时操作使用bufferevent_disable临时禁用事件复杂操作放到工作线程处理6. 常见问题与性能调优6.1 典型问题排查事件不触发检查event_add是否调用确认事件类型EV_READ/EV_WRITE正确检查文件描述符是否非阻塞内存泄漏确保每个event_new对应event_free使用valgrind检测valgrind --leak-checkfull ./your_program性能瓶颈使用event_base_gettimeofday_cached减少系统调用避免在回调中执行阻塞操作6.2 性能调优实战选择合适的后端// 强制使用epoll struct event_config *cfg event_config_new(); event_config_avoid_method(cfg, select); event_config_avoid_method(cfg, poll); base event_base_new_with_config(cfg);调整缓冲区大小// 设置发送缓冲区低水位 bufferevent_setwatermark(bev, EV_WRITE, 0, 8192);批量操作减少系统调用// 批量写入数据 struct evbuffer *output bufferevent_get_output(bev); evbuffer_add(output, data1, len1); evbuffer_add(output, data2, len2);使用零拷贝技术// 直接发送文件Linux sendfile支持 evbuffer_add_file(output, fd, 0, file_size);7. libevent与现代C的结合虽然libevent是C库但可以很好地在C项目中使用7.1 封装成类class EventLoop { public: EventLoop() : base_(event_base_new()) {} ~EventLoop() { event_base_free(base_); } void run() { event_base_dispatch(base_); } templatetypename F void addTimer(F callback, timeval timeout) { auto timer event_new(base_, -1, 0, [](evutil_socket_t, short, void *arg) { (*static_castF*(arg))(); }, callback); event_add(timer, timeout); } private: event_base *base_; };7.2 结合智能指针using BuffereventPtr std::unique_ptr bufferevent, decltype(bufferevent_free) ; BuffereventPtr createBufferevent(event_base *base, evutil_socket_t fd) { return BuffereventPtr( bufferevent_socket_new(base, fd, BEV_OPT_CLOSE_ON_FREE), bufferevent_free ); }7.3 协程支持结合libevent和C20协程Taskstd::string asyncRead(bufferevent *bev) { struct Awaitable { // ...实现await_ready等接口 bufferevent *bev; }; return Awaitable{bev}; }8. 安全编程实践8.1 输入验证void read_cb(struct bufferevent *bev, void *ctx) { struct evbuffer *input bufferevent_get_input(bev); size_t len evbuffer_get_length(input); // 防止DoS攻击 if (len MAX_ALLOWED_SIZE) { bufferevent_free(bev); return; } // ...处理数据 }8.2 SSL/TLS支持SSL_CTX *ctx SSL_CTX_new(TLS_server_method()); SSL *ssl SSL_new(ctx); SSL_set_fd(ssl, fd); struct bufferevent *bev bufferevent_openssl_socket_new( base, fd, ssl, BUFFEREVENT_SSL_ACCEPTING, BEV_OPT_CLOSE_ON_FREE );8.3 资源限制// 设置全局并发连接数限制 static std::atomicint connection_count(0); void event_cb(struct bufferevent *bev, short events, void *ctx) { if (events BEV_EVENT_EOF) { connection_count--; } } void accept_cb(...) { if (connection_count MAX_CONNECTIONS) { close(fd); return; } connection_count; // ...创建bufferevent }9. 测试与调试技巧9.1 单元测试TEST(LibeventTest, TimerFiresCorrectly) { struct event_base *base event_base_new(); int fired 0; struct timeval tv {0, 10000}; // 10ms struct event *ev event_new(base, -1, 0, [](evutil_socket_t, short, void *arg) { (*(int*)arg); }, fired); event_add(ev, tv); event_base_loop(base, EVLOOP_ONCE); ASSERT_EQ(1, fired); event_free(ev); event_base_free(base); }9.2 压力测试使用libevent的http服务器进行ab测试ab -n 10000 -c 500 http://localhost:8080/9.3 性能分析perf record -g ./your_program perf report10. 生产环境最佳实践日志集成void log_cb(int severity, const char *msg) { syslog(severity EVENT_LOG_ERR ? LOG_ERR : LOG_INFO, %s, msg); } event_set_log_callback(log_cb);监控指标void periodic_stats(evutil_socket_t fd, short event, void *arg) { struct event_base *base arg; // 获取事件循环统计 struct event_base_stats stats; event_base_get_stats(base, stats); printf(Active events: %ld\n, stats.num_events); // 再次设置定时器 struct timeval tv {1, 0}; evtimer_add(periodic_event, tv); }优雅重启void sigusr1_handler(evutil_socket_t sig, short events, void *arg) { struct event_base *base arg; // 保存状态... // 重新加载配置 reload_config(); // 重建监听socket recreate_listeners(); }核心转储分析ulimit -c unlimited gdb ./your_program core

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2430551.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

SpringBoot-17-MyBatis动态SQL标签之常用标签

文章目录 1 代码1.1 实体User.java1.2 接口UserMapper.java1.3 映射UserMapper.xml1.3.1 标签if1.3.2 标签if和where1.3.3 标签choose和when和otherwise1.4 UserController.java2 常用动态SQL标签2.1 标签set2.1.1 UserMapper.java2.1.2 UserMapper.xml2.1.3 UserController.ja…

wordpress后台更新后 前端没变化的解决方法

使用siteground主机的wordpress网站,会出现更新了网站内容和修改了php模板文件、js文件、css文件、图片文件后,网站没有变化的情况。 不熟悉siteground主机的新手,遇到这个问题,就很抓狂,明明是哪都没操作错误&#x…

网络编程(Modbus进阶)

思维导图 Modbus RTU(先学一点理论) 概念 Modbus RTU 是工业自动化领域 最广泛应用的串行通信协议,由 Modicon 公司(现施耐德电气)于 1979 年推出。它以 高效率、强健性、易实现的特点成为工业控制系统的通信标准。 包…

UE5 学习系列(二)用户操作界面及介绍

这篇博客是 UE5 学习系列博客的第二篇,在第一篇的基础上展开这篇内容。博客参考的 B 站视频资料和第一篇的链接如下: 【Note】:如果你已经完成安装等操作,可以只执行第一篇博客中 2. 新建一个空白游戏项目 章节操作,重…

IDEA运行Tomcat出现乱码问题解决汇总

最近正值期末周,有很多同学在写期末Java web作业时,运行tomcat出现乱码问题,经过多次解决与研究,我做了如下整理: 原因: IDEA本身编码与tomcat的编码与Windows编码不同导致,Windows 系统控制台…

利用最小二乘法找圆心和半径

#include <iostream> #include <vector> #include <cmath> #include <Eigen/Dense> // 需安装Eigen库用于矩阵运算 // 定义点结构 struct Point { double x, y; Point(double x_, double y_) : x(x_), y(y_) {} }; // 最小二乘法求圆心和半径 …

使用docker在3台服务器上搭建基于redis 6.x的一主两从三台均是哨兵模式

一、环境及版本说明 如果服务器已经安装了docker,则忽略此步骤,如果没有安装,则可以按照一下方式安装: 1. 在线安装(有互联网环境): 请看我这篇文章 传送阵>> 点我查看 2. 离线安装(内网环境):请看我这篇文章 传送阵>> 点我查看 说明&#xff1a;假设每台服务器已…

XML Group端口详解

在XML数据映射过程中&#xff0c;经常需要对数据进行分组聚合操作。例如&#xff0c;当处理包含多个物料明细的XML文件时&#xff0c;可能需要将相同物料号的明细归为一组&#xff0c;或对相同物料号的数量进行求和计算。传统实现方式通常需要编写脚本代码&#xff0c;增加了开…

LBE-LEX系列工业语音播放器|预警播报器|喇叭蜂鸣器的上位机配置操作说明

LBE-LEX系列工业语音播放器|预警播报器|喇叭蜂鸣器专为工业环境精心打造&#xff0c;完美适配AGV和无人叉车。同时&#xff0c;集成以太网与语音合成技术&#xff0c;为各类高级系统&#xff08;如MES、调度系统、库位管理、立库等&#xff09;提供高效便捷的语音交互体验。 L…

(LeetCode 每日一题) 3442. 奇偶频次间的最大差值 I (哈希、字符串)

题目&#xff1a;3442. 奇偶频次间的最大差值 I 思路 &#xff1a;哈希&#xff0c;时间复杂度0(n)。 用哈希表来记录每个字符串中字符的分布情况&#xff0c;哈希表这里用数组即可实现。 C版本&#xff1a; class Solution { public:int maxDifference(string s) {int a[26]…

【大模型RAG】拍照搜题技术架构速览:三层管道、两级检索、兜底大模型

摘要 拍照搜题系统采用“三层管道&#xff08;多模态 OCR → 语义检索 → 答案渲染&#xff09;、两级检索&#xff08;倒排 BM25 向量 HNSW&#xff09;并以大语言模型兜底”的整体框架&#xff1a; 多模态 OCR 层 将题目图片经过超分、去噪、倾斜校正后&#xff0c;分别用…

【Axure高保真原型】引导弹窗

今天和大家中分享引导弹窗的原型模板&#xff0c;载入页面后&#xff0c;会显示引导弹窗&#xff0c;适用于引导用户使用页面&#xff0c;点击完成后&#xff0c;会显示下一个引导弹窗&#xff0c;直至最后一个引导弹窗完成后进入首页。具体效果可以点击下方视频观看或打开下方…

接口测试中缓存处理策略

在接口测试中&#xff0c;缓存处理策略是一个关键环节&#xff0c;直接影响测试结果的准确性和可靠性。合理的缓存处理策略能够确保测试环境的一致性&#xff0c;避免因缓存数据导致的测试偏差。以下是接口测试中常见的缓存处理策略及其详细说明&#xff1a; 一、缓存处理的核…

龙虎榜——20250610

上证指数放量收阴线&#xff0c;个股多数下跌&#xff0c;盘中受消息影响大幅波动。 深证指数放量收阴线形成顶分型&#xff0c;指数短线有调整的需求&#xff0c;大概需要一两天。 2025年6月10日龙虎榜行业方向分析 1. 金融科技 代表标的&#xff1a;御银股份、雄帝科技 驱动…

观成科技:隐蔽隧道工具Ligolo-ng加密流量分析

1.工具介绍 Ligolo-ng是一款由go编写的高效隧道工具&#xff0c;该工具基于TUN接口实现其功能&#xff0c;利用反向TCP/TLS连接建立一条隐蔽的通信信道&#xff0c;支持使用Let’s Encrypt自动生成证书。Ligolo-ng的通信隐蔽性体现在其支持多种连接方式&#xff0c;适应复杂网…

铭豹扩展坞 USB转网口 突然无法识别解决方法

当 USB 转网口扩展坞在一台笔记本上无法识别,但在其他电脑上正常工作时,问题通常出在笔记本自身或其与扩展坞的兼容性上。以下是系统化的定位思路和排查步骤,帮助你快速找到故障原因: 背景: 一个M-pard(铭豹)扩展坞的网卡突然无法识别了,扩展出来的三个USB接口正常。…

未来机器人的大脑:如何用神经网络模拟器实现更智能的决策?

编辑&#xff1a;陈萍萍的公主一点人工一点智能 未来机器人的大脑&#xff1a;如何用神经网络模拟器实现更智能的决策&#xff1f;RWM通过双自回归机制有效解决了复合误差、部分可观测性和随机动力学等关键挑战&#xff0c;在不依赖领域特定归纳偏见的条件下实现了卓越的预测准…

Linux应用开发之网络套接字编程(实例篇)

服务端与客户端单连接 服务端代码 #include <sys/socket.h> #include <sys/types.h> #include <netinet/in.h> #include <stdio.h> #include <stdlib.h> #include <string.h> #include <arpa/inet.h> #include <pthread.h> …

华为云AI开发平台ModelArts

华为云ModelArts&#xff1a;重塑AI开发流程的“智能引擎”与“创新加速器”&#xff01; 在人工智能浪潮席卷全球的2025年&#xff0c;企业拥抱AI的意愿空前高涨&#xff0c;但技术门槛高、流程复杂、资源投入巨大的现实&#xff0c;却让许多创新构想止步于实验室。数据科学家…

深度学习在微纳光子学中的应用

深度学习在微纳光子学中的主要应用方向 深度学习与微纳光子学的结合主要集中在以下几个方向&#xff1a; 逆向设计 通过神经网络快速预测微纳结构的光学响应&#xff0c;替代传统耗时的数值模拟方法。例如设计超表面、光子晶体等结构。 特征提取与优化 从复杂的光学数据中自…