事件处理模式--reactor原理与实现

ops/2024/9/24 12:25:28/

文章目录

      • reactor
      • api
      • code

reactor

reactor是是服务器的重要模型, 是一种事件驱动的反应堆模式
通过epoll_create() 创建句柄, epoll_ctrl()提前注册好不同的事件处理函数 , 当事件到来就由 epoll_wait () 获取同时到来的多个事件,并且根据数据的不同类型将事件分发给事件处理机制 (事件处理器),通过回调函数方式实现响应的功能(如创建客户端fd, 读/写IO)

优点:

  1. 响应快,不必为单个同步时间所阻塞,虽然 Reactor 本身依然是同步的;
  2. 编程相对简单,可以最大程度的避免复杂的多线程及同步问题,并且避免了多线程/ 进程的切换开销
  3. 可扩展性,可以方便的通过增加 Reactor 实例个数来充分利用 CPU 资源
  4. 可复用性,reactor 框架本身与具体事件处理逻辑无关,具有很高的复用性

并发:
epoll 对应的主循环不用关心,主业务和网络部分隔离 ,如客户端发送的数据放到rbuffer中,由线程池处理rbuffer, 处理的结果放到wbuffer中,发送给客户端, rbuffer可以由数据包的头部确定,在内存池中申请空间

流程:

  1. 注册事件 和 对应的事件处理器
  2. 多路复用器等待事件到来
  3. 事件到来,激发事件分发器分发事件到对应的处理器
  4. 事件处理器处理事件,然后注册新的事件 (如服务器接收buffer 后 发送buffer)

水平触发和边沿触发:

水平触发:Level Triggered (LT)
只要有数据都会触发

默认为水平触发方式

ev.events = EPOLLIN;

边沿触发:Edge-Triggered(ET)
只有数据到来才触发,不管缓存区中是否还有数据

ev.events = EPOLLIN | EPOLLET;

api

  • epol_create: 创建fd
int epoll_create(int size);

创建一个epoll的句柄,size通常为1,当创建好epoll句柄后,它就是会占用一个fd

  • epoll_ctrl: epoll的事件注册函数
int epoll_ctl(int epfd, int op, int fd, struct epoll_event *event);

epoll_ctl向 epoll对象中添加、修改或者删除感兴趣的事件,返回0表示成功,否则返回–1,此时需要根据errno错误码判断错误类型
epfd : epoll_create()的返回值
op : 表示动作
EPOLL_CTL_ADD:注册新的fd到epfd中;
EPOLL_CTL_MOD:修改已经注册的fd的监听事件;
EPOLL_CTL_DEL:从epfd中删除一个fd;

fd : 需要监听的fd

*event : 告诉内核需要监听什么事

struct epoll_event结构:

typedef union epoll_data {void *ptr;int fd;__uint32_t u32;__uint64_t u64;
} epoll_data_t;struct epoll_event {__uint32_t events; /* Epoll events */epoll_data_t data; /* User data variable */
};
  • epoll_wait: 等待事件产生,类似与select调用
 int epoll_wait(int epfd, struct epoll_event * events, int maxevents, int timeout);

epfd: epoll的描述符
*event : events则是分配好的 epoll_event结构体数组,epoll将会把发生的事件复制到 events数组中
maxevnets : 表示本次可以返回的最大事件数目,通常 maxevents参数与预分配的events数组的大小是相等的。
timeout : 表示在没有检测到事件发生时最多等待的时间(单位为毫秒),如果 timeout为0,则表示 epoll_wait在 rdllist链表中为空,立刻返回,不会等待

code

reactor 模型:
1.事件驱动 EPOLLIN/ EPOLLOUT
2. 回调:
listenfd --> accept_cb
clientfd–>recv_cb
clientfd–>send_cb

#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <sys/types.h>
#include <sys/socket.h>
#include <string.h>
#include <arpa/inet.h>
#include <netinet/in.h>#include <sys/epoll.h>
#include <sys/epoll.h>#include <errno.h>
#include <fcntl.h>
#include <pthread.h>#define BUFFER_LENGTH 1024
#define EVENT_LENGTH 1024//回调函数
typedef int (*ZVCALLBACK) (int fd, int events, void *arg);// 定义连接客户端所对应的fd, 每个客户端对应一个rbuffer和一个写buffer
typedef struct zv_connect_s {int fd;ZVCALLBACK cb;char rbuffer[BUFFER_LENGTH];char wbuffer[BUFFER_LENGTH];int count;int rc;int wc;
}typedef struct zv_connblock_s {zv_connect_t *block;int blkcnt; //第几块struct zv_connblock_s *next;
}zv_connblock_t;//创建reactor
typedef struct zv_reactor_s {int epfd; // pool 所对应的fd//struct epoll_event_events[EVENT_LENGTH];zv_connblock_t *blockheader; // connblock的头指针
}zv_reactor_t;int zv_connect_block(zv_reactor * reactor) {if(!reactor) return NULL;// 尾插法zv_connblock _t *blk = reactor->blockheader;while(blk->next != NUll ) blk = blk->next;//malloc blockzv_connblock_t * connblock = malloc(sizeof(zv_connblock_t) + 1024 * sizeof(zv_connect_t));connblock->block = (zv_connect_t *)(reactor->blockheader +1);connblock->next = NULL;blk->next = connblock;reactor->blkcnt++;
}zv_connect_t *zv_connnet_idx(zv_reactor,int fd) {if(!reactor ) return NULL;int blkidx = fd / EVENT_LENGH; // 放到第几块while(blkidx >= reactor->blkcnt) {//malloc 新政加一块zv_connect_block(reactor);}int i = 0;zv_connblock_t *blk = reactor->blockheader;while(i++ <blkidx) {blk = blk->next; }return blk->block[fd % EVENT_LENGTH];
}// 初始化reactor
int zv_init_reactor(zv_reactor_t * reactor) {if(!reactor) return -1;// 分配connblock头节点空间 + block 所对应的空间(1024个block, 对应1024个用户)reactor->blockheader = malloc(sizeof(zv_connblock_t) + 1024 * sizeof(zv_connect_t));if(reactor->blockhead  == NULL) return -1;reactor->blockheader->block = (zc_connect_t *)reactor->blockhead + 1 ;  // (1 == sizeof(zv_connblock_t));reactor->blkcnt = 1;rector->blockhead->next = NULL;reactor->epfd = epoll_create(1);
}// 销毁reactor
void zv_dest_reactor(zv_reactor_t * reactor) {if(!reactor ) return -1;if(reactor->blockheader) free(reactor->blockheader);close(reactor->epfd);
}//申明这些事件处理器函数
int recv_cb(int fd, int events, void *arg);
int accept_cb(int fd, int events, void* arg);
int send_cb(int fd, int evnts, void* arg);int set_listener(zv_reactor_t * reactor, int fd , ZVCALLBACK cb) {if(!reactor || !reactor->blockheader))return -1;reactor->blockheader->block[fd].fd = fd;reactor->blockheader->block[fd].cb = cb;// epoll_event 时库函数定义,相当于一个袋子,装fdstruct epoll_event ev;ev.events = EPOLLIN | EPOLLET;ev.data.fd = fd;epoll_ctl(reactor->epfd, EPOLL_CTL_ADD, clientfd, &ev);}// 发送数据
int send_cb(int fd, int events, void* arg) {zv_reactor_t *reactor = (zv_reactor_t *)arg;zv_connect_t * conn =zv_connetct_idx(reactor,fd);send(fd,conn->wbuffer,conn->wc,0);conn->cb = recv_cb;struct epoll_event ev;ev.events = EPOLLIN;ev.data.fd = fd;epoll_ctl(reactor->epfd, EPOLL_CTL_MOD, fd, &ev);
}int recv_cb(int fd, int events, void *arg) {zv_reactor_t *reactor = (zv_reactor_t *)arg;zv_connect_t * conn = zv_connetct_idx(reactor,fd);int ret = recv(fd, conn->rbuffer + conn->rc, conn->count, 0);if(ret < 0) {return -1;} else if (ret = 0) {//清空数据,置为不可用conn->fd = -1;conn->rc = 0;conn->wc = 0;//epoll_ctrl 移除epoll_ctrl(reactor->epfd,EPOLL_CTL_DEL,fd,NULL);close(fd);return -1;}conn->rc +=ret;//printf("rbuffer:%s\n ret:%d\n ",conn->rbuffer,conn->rc);memcpy(conn->wbuffer,conn->rbuffer,conn->rc);conn->wc = conn->rc;// 读完之后写conn->cb = send_cb;struct epoll_event ev;ev.events = EPOLLOUT;ev.data.fd = fd;epoll_ctl(reactor->epfd, EPOLL_CTL_MOD, fd, &ev);}//处理新的连接, 将客户端的fd设置到block所对应的位置,同时,加入epoll,调用实在main 函数 while循环中的conn->cb进行调用// 第一次调用通过set_lisenten(accept_cb)进行调用
int accept_cb(int fd, int events, void* arg) {struct sockaddr_in clientaddr;memset(&clientaddr, 0, sizeof(clientaddr));socklen_t cli_len = sizeof(clientaddr);int clientfd = accept(fd, (struct sockaddr *)&clientaddr, &cli_len);if (clientfd  < 0) return -1;printf("clientfd : %d\n",clientfd);// 找到fd, conn用来存储信息zv_reactor_t *reactor = (zv_reactor_t *)arg;zv_connect_t * conn = zv_connetct_idx(reactor,fd);conn->fd = clientfd;conn->cb = recv_cb; //clientfd 可读进行回调conn->count = BUFFER_LENGTH;//注册读事件处理器struct epoll_event ev;ev.events = EPOLLIN | EPOLLET;ev.data.fd = clientfd;epoll_ctl(reactor->epfd,EPOLL_CTL_ADD, clientfd, &ev)return clientfd;
}// 初始化server
int init_server(short port) {int sockfd = socket(AF_INET, SOCK_STREAM, 0);struct sockaddr_in serv_addr;int port = atoi(argv[1]);//确定服务端协议地址簇memset(&serv_addr, 0, sizeof(serv_addr));serv_addr.sin_family = AF_INET;serv_addr.sin_addr.s_addr = INADDR_ANY;serv_addr.sin_port = htons(port);//进行绑定if (-1 == bind(sockfd, (SA*)&serv_addr, sizeof(serv_addr))) {fprintf(stderr, "bind error");return 2;}if (-1 == listen(sockfd, 5)) {fprintf(stderr, "listen error");return 3;}return sockfd;
}
int main(int argc, char* argv[]) {if (argc != 2) {return -1;}int port = atoi(argv[1]);int sockfd = init_server(port);zv_reactor_t reactor;zv_init_reactor(&reactor);  // 初始化epoll//为sockfd绑定事件set_listener(&reactor,sockfd,accept_cb);struct epoll_event events[1024] = {0};while(1) {int nready = epoll_wait(reactor.epfd, events, 512, -1);int i = 0;//循环分发所有的IO事件给处理器for (i = 0; i < nready; ++i) {// 通过events中的fd 设置reactor 中的fd// events中的fd 通过 sockfd 设置int connfd = events[i].data.fd;zv_connect_t *conn = zv_connect_idx(&reactor,connfd);//有事件,调用对应的回调函数if (events[i].events & EPOLLIN) {// 通过reactor头指针和fd 定位到资源所在的位置// cb为函数指针,cb调用,进行回调conn->cb(ev->fd,events[i].events,&reactor);}if (events[i].events & EPOLLOUT) {conn->cb(ev->fd,events[i].events,&reactor);}}}return 0;
}

http://www.ppmy.cn/ops/30691.html

相关文章

Linux / Ubuntu 备份数据

Linux / Ubuntu 备份数据 需要备份的文件tar 工具备份/打包过程恢复/解包过程 流程自动化start_backup.shserver_backup.sh 同步发布在个人笔记Linux / Ubuntu 备份数据 需要备份的文件 对于我们的 linux 服务器&#xff08;当然也适用于桌面端&#xff09;&#xff0c;时常进…

Pyside6详细使用教程python之GUI开发

1、首先需要安装Pyside6&#xff0c;终端执行命令&#xff1a; pip3.10 install pyside6 2、你们的一般是 pip install pyside6 2、如下代码创建一个简易程序导入必要的模块 import sys from PySide6.QtWidgets import QApplication, QWidget, QVBoxLayout, QPushButton,…

【数学 排列组合】1643. 第 K 条最小指令

本文涉及知识点 数学 排列组合 LeetCode1643. 第 K 条最小指令 Bob 站在单元格 (0, 0) &#xff0c;想要前往目的地 destination &#xff1a;(row, column) 。他只能向 右 或向 下 走。你可以为 Bob 提供导航 指令 来帮助他到达目的地 destination 。 指令 用字符串表示&am…

QT httpServer多线程后台服务器的例子实现

1.需求 1.1 用户需要其他平台&#xff08;web端&#xff09;调用Qt平台的接口&#xff0c;获取想要的数据并实时显示在网页里&#xff0c;比如实时的温湿度&#xff0c;用户数据等 1.2 用户需要在其他平台&#xff08;web端&#xff09;调用Qt平台的接口&#xff0c;下发数据…

《MySQL对数据库中表的结构的操作》

文章目录 一、建表二、查看表结构所有能查看到数据库&#xff0c;表的操作痕迹的本质都是服务器保存下来了这些操作记录。 三、修改表1.改表名字2.添加表记录3.添加表的更多字段4.修改表的字段5. 删除表的字段 总结 以下的数据库表的操作全是基于user_db这个数据库操作的&#…

LangChain 入门6 magic不同格式文件的读取

概述&#xff1a; 除了原始文本数据&#xff0c;可能还希望从其他文件类型&#xff08;如PowerPoint演示文稿或PDF&#xff09;中提取信息。 可以使用LangChain文档加载程序将文件解析为可以输入LLM的文本格式。 基于MIME类型的解析 数据加载 import requestsresponse req…

数据结构之“合并两个有序链表”

一、后插法 1、定义&#xff1a; 通过将新节点逐个插入到链表的尾部来创建链表。 2、特点&#xff1a; &#xff08;1&#xff09;每次申请一个新节点&#xff0c;读入相应的数据元素值 &#xff08;2&#xff09;为了使新节点能够插入到表尾&#xff0c;需要增加一个尾指针 r…

Linux硬盘挂载操作记录

文章目录 1.前置概念2.挂载步骤2.1查看盘信息2.2挂载整个盘到指定目录2.3将盘划分为多个分区并挂载到不同目录2.3.1创建分区2.3.2指定文件系统2.3.3挂载目录 3.删除分区 1.前置概念 分区&#xff1a;分区就是将硬盘划分为多个区域&#xff0c;每个区域都有自己的文件系统&…