epoll反应堆模型

================================

下面代码实现的思想:epoll反应堆模型:( libevent 网络编程开源库 核心思想)

1.  普通多路IO转接服务器: 红黑树 ―― 添加待监听的结点 ―― epoll_ctl ―― EPOLLIN ―― fd ―― 监听 ―― epoll_wait ――

  返回满足监听事件的fd的总个数 ―― 传出参数 events数组 ―― 内部元素 ――满足对应监听事件的fd

  ―― 判断对应事件 ―― Accept、Read。――循环 epoll_wait 监听

2.  epoll反应堆模型: 创建红黑树 ―― 添加监听结点 ―― epoll_ctl ―― EPOLLIN ―― fd ―― 监听 ―― epoll_wait ―― 将结点从树上摘下

  ―― 大写转小写 ―― 修改fd的监听事件 ―― EPOLLOUT ―― 重新添加到红黑树 ―― 监听 ―― epoll_wait ―― 写数据到

  客户端 ―― 再将结点从树上摘下 ―― 修改监听时间 ―― EPOLLIN ―― 挂上红黑树监听。

  添加监听写事件的目的: “滑动窗口”已满,绕过写。epoll_wait满足后再进行写。

  1 /*
  2  *epoll基于非阻塞I/O事件驱动
  3  */
  4 #include <stdio.h>
  5 #include <sys/socket.h>
  6 #include <sys/epoll.h>
  7 #include <arpa/inet.h>
  8 #include <fcntl.h>
  9 #include <unistd.h>
 10 #include <errno.h>
 11 #include <string.h>
 12 #include <stdlib.h>
 13 #include <time.h>
 14
 15 #define MAX_EVENTS  1024                                    //监听上限数
 16 #define BUFLEN 4096
 17 #define SERV_PORT   8080
 18
 19 void recvdata(int fd, int events, void *arg);
 20 void senddata(int fd, int events, void *arg);
 21
 22 /* 描述就绪文件描述符相关信息 */
 23
 24 struct myevent_s {
 25     int fd;                                                 //要监听的文件描述符
 26     int events;                                             //对应的监听事件
 27     void *arg;                                              //泛型参数
 28     void (*call_back)(int fd, int events, void *arg);       //回调函数
 29     int status;                                             //是否在监听:1->在红黑树上(监听), 0->不在(不监听)
 30     char buf[BUFLEN];
 31     int len;
 32     long last_active;                                       //记录每次加入红黑树 g_efd 的时间值
 33 };
 34
 35 int g_efd;                                                  //全局变量, 保存epoll_create返回的文件描述符
 36 struct myevent_s g_events[MAX_EVENTS+1];                    //自定义结构体类型数组. +1-->listen fd
 37
 38
 39 /*将结构体 myevent_s 成员变量 初始化*/
 40
 41 void eventset(struct myevent_s *ev, int fd, void (*call_back)(int, int, void *), void *arg)
 42 {
 43     ev->fd = fd;
 44     ev->call_back = call_back;
 45     ev->events = 0;
 46     ev->arg = arg;
 47     ev->status = 0;
 48     memset(ev->buf, 0, sizeof(ev->buf));
 49     ev->len = 0;
 50     ev->last_active = time(NULL);                       //调用eventset函数的时间
 51
 52     return;
 53 }
 54
 55 /* 向 epoll监听的红黑树 添加一个 文件描述符 */
 56
 57 void eventadd(int efd, int events, struct myevent_s *ev)
 58 {
 59     struct epoll_event epv = {0, {0}};
 60     int op;
 61     epv.data.ptr = ev;
 62     epv.events = ev->events = events;       //EPOLLIN 或 EPOLLOUT
 63
 64     if (ev->status == 0) {                                          //已经在红黑树 g_efd 里
 65         op = EPOLL_CTL_ADD;                 //将其加入红黑树 g_efd, 并将status置1
 66         ev->status = 1;
 67     }
 68
 69     if (epoll_ctl(efd, op, ev->fd, &epv) < 0)                       //实际添加/修改
 70         printf("event add failed [fd=%d], events[%d]\n", ev->fd, events);
 71     else
 72         printf("event add OK [fd=%d], op=%d, events[%0X]\n", ev->fd, op, events);
 73
 74     return ;
 75 }
 76
 77 /* 从epoll 监听的 红黑树中删除一个 文件描述符*/
 78
 79 void eventdel(int efd, struct myevent_s *ev)
 80 {
 81     struct epoll_event epv = {0, {0}};
 82
 83     if (ev->status != 1)                                        //不在红黑树上
 84         return ;
 85
 86     //epv.data.ptr = ev;
 87     epv.data.ptr = NULL;
 88     ev->status = 0;                                             //修改状态
 89     epoll_ctl(efd, EPOLL_CTL_DEL, ev->fd, &epv);                //从红黑树 efd 上将 ev->fd 摘除
 90
 91     return ;
 92 }
 93
 94 /*  当有文件描述符就绪, epoll返回, 调用该函数 与客户端建立链接 */
 95
 96 void acceptconn(int lfd, int events, void *arg)
 97 {
 98     struct sockaddr_in cin;
 99     socklen_t len = sizeof(cin);
100     int cfd, i;
101
102     if ((cfd = accept(lfd, (struct sockaddr *)&cin, &len)) == -1) {
103         if (errno != EAGAIN && errno != EINTR) {
104             /* 暂时不做出错处理 */
105         }
106         printf("%s: accept, %s\n", __func__, strerror(errno));
107         return ;
108     }
109
110     do {
111         for (i = 0; i < MAX_EVENTS; i++)                                //从全局数组g_events中找一个空闲元素
112             if (g_events[i].status == 0)                                //类似于select中找值为-1的元素
113                 break;                                                  //跳出 for
114
115         if (i == MAX_EVENTS) {
116             printf("%s: max connect limit[%d]\n", __func__, MAX_EVENTS);
117             break;                                                      //跳出do while(0) 不执行后续代码
118         }
119
120         int flag = 0;
121         if ((flag = fcntl(cfd, F_SETFL, O_NONBLOCK)) < 0) {             //将cfd也设置为非阻塞
122             printf("%s: fcntl nonblocking failed, %s\n", __func__, strerror(errno));
123             break;
124         }
125
126         /* 给cfd设置一个 myevent_s 结构体, 回调函数 设置为 recvdata */
127
128         eventset(&g_events[i], cfd, recvdata, &g_events[i]);
129         eventadd(g_efd, EPOLLIN, &g_events[i]);                         //将cfd添加到红黑树g_efd中,监听读事件
130
131     } while(0);
132
133     printf("new connect [%s:%d][time:%ld], pos[%d]\n",
134             inet_ntoa(cin.sin_addr), ntohs(cin.sin_port), g_events[i].last_active, i);
135     return ;
136 }
137
138 void recvdata(int fd, int events, void *arg)
139 {
140     struct myevent_s *ev = (struct myevent_s *)arg;
141     int len;
142
143     len = recv(fd, ev->buf, sizeof(ev->buf), 0);            //读文件描述符, 数据存入myevent_s成员buf中
144
145     eventdel(g_efd, ev);        //将该节点从红黑树上摘除
146
147     if (len > 0) {
148
149         ev->len = len;
150         ev->buf[len] = ‘\0‘;                                //手动添加字符串结束标记
151         printf("C[%d]:%s\n", fd, ev->buf);
152
153         eventset(ev, fd, senddata, ev);                     //设置该 fd 对应的回调函数为 senddata
154         eventadd(g_efd, EPOLLOUT, ev);                      //将fd加入红黑树g_efd中,监听其写事件
155
156     } else if (len == 0) {
157         close(ev->fd);
158         /* ev-g_events 地址相减得到偏移元素位置 */
159         printf("[fd=%d] pos[%ld], closed\n", fd, ev-g_events);
160     } else {
161         close(ev->fd);
162         printf("recv[fd=%d] error[%d]:%s\n", fd, errno, strerror(errno));
163     }
164
165     return;
166 }
167
168 void senddata(int fd, int events, void *arg)
169 {
170     struct myevent_s *ev = (struct myevent_s *)arg;
171     int len;
172
173     len = send(fd, ev->buf, ev->len, 0);                    //直接将数据 回写给客户端。未作处理
174     /*
175     printf("fd=%d\tev->buf=%s\ttev->len=%d\n", fd, ev->buf, ev->len);
176     printf("send len = %d\n", len);
177     */
178     eventdel(g_efd, ev);                                //从红黑树g_efd中移除
179
180     if (len > 0) {
181
182         printf("send[fd=%d], [%d]%s\n", fd, len, ev->buf);
183         eventset(ev, fd, recvdata, ev);                     //将该fd的 回调函数改为 recvdata
184         eventadd(g_efd, EPOLLIN, ev);                       //从新添加到红黑树上, 设为监听读事件
185
186     } else {
187         close(ev->fd);                                      //关闭链接
188         printf("send[fd=%d] error %s\n", fd, strerror(errno));
189     }
190
191     return ;
192 }
193
194 /*创建 socket, 初始化lfd */
195
196 void initlistensocket(int efd, short port)
197 {
198     struct sockaddr_in sin;
199
200     int lfd = socket(AF_INET, SOCK_STREAM, 0);
201     fcntl(lfd, F_SETFL, O_NONBLOCK);                                            //将socket设为非阻塞
202
203     memset(&sin, 0, sizeof(sin));                                               //bzero(&sin, sizeof(sin))
204     sin.sin_family = AF_INET;
205     sin.sin_addr.s_addr = INADDR_ANY;
206     sin.sin_port = htons(port);
207
208     bind(lfd, (struct sockaddr *)&sin, sizeof(sin));
209
210     listen(lfd, 20);
211
212     /* void eventset(struct myevent_s *ev, int fd, void (*call_back)(int, int, void *), void *arg);  */
213     eventset(&g_events[MAX_EVENTS], lfd, acceptconn, &g_events[MAX_EVENTS]);
214
215     /* void eventadd(int efd, int events, struct myevent_s *ev) */
216     eventadd(efd, EPOLLIN, &g_events[MAX_EVENTS]);
217
218     return ;
219 }
220
221 int main(int argc, char *argv[])
222 {
223     unsigned short port = SERV_PORT;
224
225     if (argc == 2)
226         port = atoi(argv[1]);                           //使用用户指定端口.如未指定,用默认端口
227
228     g_efd = epoll_create(MAX_EVENTS+1);                 //创建红黑树,返回给全局 g_efd
229     if (g_efd <= 0)
230         printf("create efd in %s err %s\n", __func__, strerror(errno));
231
232     initlistensocket(g_efd, port);                      //初始化监听socket
233
234     struct epoll_event events[MAX_EVENTS+1];            //保存已经满足就绪事件的文件描述符数组
235     printf("server running:port[%d]\n", port);
236
237     int checkpos = 0, i;
238     while (1) {
239         /* 超时验证,每次测试100个链接,不测试listenfd 当客户端60秒内没有和服务器通信,则关闭此客户端链接 */
240
241         long now = time(NULL);                          //当前时间
242         for (i = 0; i < 100; i++, checkpos++) {         //一次循环检测100个。 使用checkpos控制检测对象
243             if (checkpos == MAX_EVENTS)
244                 checkpos = 0;
245             if (g_events[checkpos].status != 1)         //不在红黑树 g_efd 上
246                 continue;
247
248             long duration = now - g_events[checkpos].last_active;       //客户端不活跃的世间
249
250             if (duration >= 60) {
251                 close(g_events[checkpos].fd);                           //关闭与该客户端链接
252                 printf("[fd=%d] timeout\n", g_events[checkpos].fd);
253                 eventdel(g_efd, &g_events[checkpos]);                   //将该客户端 从红黑树 g_efd移除
254             }
255         }
256
257         /*监听红黑树g_efd, 将满足的事件的文件描述符加至events数组中, 1秒没有事件满足, 返回 0*/
258         int nfd = epoll_wait(g_efd, events, MAX_EVENTS+1, 1000);
259         if (nfd < 0) {
260             printf("epoll_wait error, exit\n");
261             break;
262         }
263
264         for (i = 0; i < nfd; i++) {
265             /*使用自定义结构体myevent_s类型指针, 接收 联合体data的void *ptr成员*/
266             struct myevent_s *ev = (struct myevent_s *)events[i].data.ptr;
267
268             if ((events[i].events & EPOLLIN) && (ev->events & EPOLLIN)) {           //读就绪事件
269                 ev->call_back(ev->fd, events[i].events, ev->arg);
270             }
271             if ((events[i].events & EPOLLOUT) && (ev->events & EPOLLOUT)) {         //写就绪事件
272                 ev->call_back(ev->fd, events[i].events, ev->arg);
273             }
274         }
275     }
276
277     /* 退出前释放所有资源 */
278     return 0;
279 }
时间: 2024-10-27 13:57:46

epoll反应堆模型的相关文章

epoll 反应堆

epoll反应堆模型 ================================ 下面代码实现的思想:epoll反应堆模型:( libevent 网络编程开源库 核心思想) 1. 普通多路IO转接服务器: 红黑树 ―― 添加待监听的结点 ―― epoll_ctl ―― EPOLLIN ―― fd ―― 监听 ―― epoll_wait ―― 返回满足监听事件的fd的总个数 ―― 传出参数 events数组 ―― 内部元素 ――满足对应监听事件的fd ―― 判断对应事件 ―― Accept.

Linux下select, poll和epoll IO模型的详解(转)

http://blog.csdn.net/tianmohust/article/details/6677985 一).Epoll 介绍 Epoll 可是当前在 Linux 下开发大规模并发网络程序的热门人选, Epoll 在 Linux2.6 内核中正式引入,和 select 相似,其实都 I/O 多路复用技术而已 ,并没有什么神秘的.其实在 Linux 下设计并发网络程序,向来不缺少方法,比如典型的 Apache 模型( Process Per Connection ,简称 PPC ), TP

epoll反应堆

1 /* 2 * epoll基于非阻塞I/O事件驱动 3 */ 4 #include <stdio.h> 5 #include <sys/socket.h> 6 #include <sys/epoll.h> 7 #include <arpa/inet.h> 8 #include <fcntl.h> 9 #include <unistd.h> 10 #include <errno.h> 11 #include <str

浅谈libevent的使用--事件和数据缓冲

首先在学习libevent库的使用前,我们还要从基本的了解开始,已经熟悉了epoll以及reactor,然后从event_base学习,依次学习事件event.数据缓冲Bufferevent和数据封装evBuffer等,再结合具体的几个实例来了解libevent库的一些基本使用,有助于我们理解它的一些内部实现(由于之前我已经写过一篇epoll反应堆模型的,所以这里就不再介绍,直接从event_base开始介绍). libevent下载与安装: 在官网上找到 libevent-2.0.22-sta

高性能网络编程6--reactor反应堆与定时器管理

反应堆开发模型被绝大多数高性能服务器所选择,上一篇所介绍的IO多路复用是它的实现基础.定时触发功能通常是服务器必备组件,反应堆模型往往还不得不将定时器的管理囊括在内.本篇将介绍反应堆模型的特点和用法. 首先我们要谈谈,网络编程界为什么需要反应堆?有了IO复用,有了epoll,我们已经可以使服务器并发几十万连接的同时,维持高TPS了,难道这还不够吗? 我的答案是,技术层面足够了,但在软件工程层面却是不够的. 程序使用IO复用的难点在哪里呢?1个请求虽然由多次IO处理完成,但相比传统的单线程完整处理

epoll的两种触发模式

epoll有两种模式,Edge Triggered(简称ET) 和 Level Triggered(简称LT).在采用这两种模式时要注意的是,如果采用ET模式,那么仅当状态发生变化时才会通知,而采用LT模式类似于原来的select/poll操作,只要还有没有处理的事件就会一直通知. 以代码来说明问题: 首先给出server的代码,需要说明的是每次accept的连接,加入可读集的时候采用的都是ET模式,而且接收缓冲区是5字节的,也就是每次只接收5字节的数据: Java代码   #include <

select, poll, epoll区别详解(一)

1 select函数 int select(int nfds, fd_set *readfds, fd_set *writefds, fd_set *exceptfds, struct timeval *timeout); 1.1 参数说明 第一个参数nfds为fdset集合中最大描述符值加1,fdset是一个位数组,其大小限制为__FD_SETSIZE(1024),位数组的每一位代表其对应的描述符是否需要被检查. 第二三四个参数表示需要关注读.写.错误事件的文件描述符位数组,这些参数既是输入参

epoll的两种工作模式

epoll有两种模式,Edge Triggered(简称ET) 和 Level Triggered(简称LT).在采用这两种模式时要注意的是,如果采用ET模式,那么仅当状态发生变化时才会通知,而采用LT模式类似于原来的select/poll操作,只要还有没有处理的事件就会一直通知. 以代码来说明问题: 首先给出server的代码,需要说明的是每次accept的连接,加入可读集的时候采用的都是ET模式,而且接收缓冲区是5字节的,也就是每次只接收5字节的数据: Java代码   #include <

使用 libevent 和 libev 提高网络应用性能——I/O模型演进变化史

构建现代的服务器应用程序需要以某种方法同时接收数百.数千甚至数万个事件,无论它们是内部请求还是网络连接,都要有效地处理它们的操作. 有许多解决方案,但事件驱动也被广泛应用到网络编程中.并大规模部署在高连接数高吞吐量的服务器程序中,如 http 服务器程序.ftp 服务器程序等.相比于传统的网络编程方式,事件驱动能够极大的降低资源占用,增大服务接待能力,并提高网络传输效率. 这些事件驱动模型中, libevent 库和 libev库能够大大提高性能和事件处理能力.在本文中,我们要讨论在 UNIX/