对于redis框架的理解(四)

上一篇讲述了eventloop的结构和创建,添加文件事件删除文件事件,派发等等。

而eventloop主要就是调用不同网络模型完成事件监听和派发的。

这一篇主要讲述epoll网络模型,redis是如何封装和调用的

下面是epoll_event的结构

  1. /*
  2. epoll_event 结构
  3. struct epoll_event
  4. {
  5. uint32_t events; //epoll_event 要注册的事件类型
  6. epoll_data_t data; //User data //联合体用于存储用户要保存的数据
  7. }
  8. typedef union epoll_data
  9. {
  10. void * ptr;
  11. uint32_t u32;
  12. uint64_t u64;
  13. int fd; //一般存储accept后生成的socketfd
  14. }epoll_data_t
  15. */

Ae_epoll.c文件中回传的数据结构

  1. #include <sys/epoll.h>
  2. //该结构用于回传eventLoop->apidata
  3. typedef struct aeApiState {
  4. int epfd; //管理epoll事件表的句柄
  5. struct epoll_event *events; //epoll events的队列
  6. } aeApiState;

Ae_epoll.c中创建epoll句柄

  1. //epoll 创建epfd过程
  2. static int aeApiCreate(aeEventLoop *eventLoop) {
  3. //开辟存储不同网络模型的数据块
  4. aeApiState *state = zmalloc(sizeof(aeApiState));
  5. if (!state) return -1;
  6. //开辟epoll_event * size 大小的空间,这段空间是连续的
  7. state->events = zmalloc(sizeof(struct epoll_event)*eventLoop->setsize);
  8. //开辟失败
  9. if (!state->events) {
  10. zfree(state);
  11. return -1;
  12. }
  13. //创建epfd,最多关注1024个文件描述符
  14. state->epfd = epoll_create(1024); /* 1024 is just a hint for the kernel */
  15. if (state->epfd == -1) {
  16. zfree(state->events);
  17. zfree(state);
  18. return -1;
  19. }
  20. // eventLoop->apidata数据回传
  21. eventLoop->apidata = state;
  22. return 0;
  23. }

Ae_epoll.c重新设置events队列大小

  1. //重新设置aeApiState大小
  2. static int aeApiResize(aeEventLoop *eventLoop, int setsize) {
  3. aeApiState *state = eventLoop->apidata;
  4. state->events = zrealloc(state->events, sizeof(struct epoll_event)*setsize);
  5. return 0;
  6. }

Ae_epoll.c中释放内存和回收

  1. //释放aeApiState和 events 的内存
  2. static void aeApiFree(aeEventLoop *eventLoop) {
  3. aeApiState *state = eventLoop->apidata;
  4. //关闭文件描述符
  5. close(state->epfd);
  6. //释放events的内存
  7. zfree(state->events);
  8. //释放aeApiState 的内存
  9. zfree(state);
  10. }

Ae_epoll.c添加读写事件或者更改读写事件的函数

  1. //epoll 注册事件,读或者写
  2. static int aeApiAddEvent(aeEventLoop *eventLoop, int fd, int mask) {
  3. //aeEventLopp 的数据域
  4. aeApiState *state = eventLoop->apidata;
  5. //epoll_event 事件
  6. struct epoll_event ee;
  7. //aeEventLoop 中注册的文件事件队列标志位如果不是AE_NONE,那么更改,否则添加
  8. int op = eventLoop->events[fd].mask == AE_NONE ?
  9. EPOLL_CTL_ADD : EPOLL_CTL_MOD;
  10. //events读写事件清零
  11. ee.events = 0;
  12. //aeEventLoop 中注册的文件事件标志位进行融合
  13. mask |= eventLoop->events[fd].mask; /* Merge old events */
  14. //如果是读事件,那么将epoll_event 注册读事件
  15. if (mask & AE_READABLE) ee.events |= EPOLLIN;
  16. //如果是写事件,那么将epoll_event 注册写事件
  17. if (mask & AE_WRITABLE) ee.events |= EPOLLOUT;
  18. ee.data.u64 = 0; /* avoid valgrind warning */
  19. //epoll_event 文件描述符
  20. ee.data.fd = fd;
  21. //将epoll事件注册到epoll的事件表里
  22. if (epoll_ctl(state->epfd,op,fd,&ee) == -1) return -1;
  23. return 0;
  24. }

Ae_epoll.c中删除读写事件的函数

  1. static void aeApiDelEvent(aeEventLoop *eventLoop, int fd, int delmask) {
  2. aeApiState *state = eventLoop->apidata;
  3. struct epoll_event ee;
  4. //这是创建的逆过程
  5. //按位去反,按位&,即去掉相应的标志位
  6. int mask = eventLoop->events[fd].mask & (~delmask);
  7. ee.events = 0;
  8. //判断此时文件事件是读
  9. if (mask & AE_READABLE) ee.events |= EPOLLIN;
  10. //判断此时文件事件是写
  11. if (mask & AE_WRITABLE) ee.events |= EPOLLOUT;
  12. ee.data.u64 = 0; /* avoid valgrind warning */
  13. ee.data.fd = fd;
  14. if (mask != AE_NONE) {
  15. //更改epoll_event的事件类型
  16. epoll_ctl(state->epfd,EPOLL_CTL_MOD,fd,&ee);
  17. } else {
  18. /* Note, Kernel < 2.6.9 requires a non null event pointer even for
  19. * EPOLL_CTL_DEL. */
  20. //删除epoll_event 事件
  21. epoll_ctl(state->epfd,EPOLL_CTL_DEL,fd,&ee);
  22. }
  23. }

事件派发函数

  1. //epoll 事件派发
  2. static int aeApiPoll(aeEventLoop *eventLoop, struct timeval *tvp) {
  3. aeApiState *state = eventLoop->apidata;
  4. int retval, numevents = 0;
  5. //epoll wait 返回就绪状态的文件描述符,后面的结构体如果为空,那么说明阻塞,不为空表示等待多少秒后返回
  6. //下面是man手册的解释
  7. //Specifying a timeout of -1 makesepoll_wait(2) wait indefinitely, while specifying
  8. //a timeout equal to zero makesepoll_wait(2) to return immediately
  9. //even if no events are available (return code equal to zero)
  10. retval = epoll_wait(state->epfd,state->events,eventLoop->setsize,
  11. tvp ? (tvp->tv_sec*1000 + tvp->tv_usec/1000) : -1);
  12. if (retval > 0) {
  13. int j;
  14. numevents = retval;
  15. //轮询处理已经就绪的文件描述符
  16. for (j = 0; j < numevents; j++) {
  17. int mask = 0;
  18. //指针+j,表示每次便宜地址为j*epoll_event个字节
  19. struct epoll_event *e = state->events+j;
  20. //可读事件
  21. if (e->events & EPOLLIN) mask |= AE_READABLE;
  22. //可写事件
  23. if (e->events & EPOLLOUT) mask |= AE_WRITABLE;
  24. //处理错误发送给客户端
  25. if (e->events & EPOLLERR) mask |= AE_WRITABLE;
  26. //对端正常关闭(程序里close(),shell下kill或ctr+c),
  27. //触发EPOLLIN和EPOLLRDHUP,但是不触发EPOLLERR和EPOLLHUP。
  28. if (e->events & EPOLLHUP) mask |= AE_WRITABLE;
  29. //添加到aeApiState 的就绪事件队列里
  30. eventLoop->fired[j].fd = e->data.fd;
  31. //就绪时间状态
  32. eventLoop->fired[j].mask = mask;
  33. }
  34. }
  35. return numevents;
  36. }
  1. //网络模型名字
  2. static char *aeApiName(void) {
  3. return "epoll";
  4. }

以上是封装的epoll结构和解释

热门评论

热门文章

  1. C++ 类的继承封装和多态

    喜欢(588) 浏览(2063)
  2. windows环境搭建和vscode配置

    喜欢(587) 浏览(1561)
  3. 解密定时器的实现细节

    喜欢(566) 浏览(1428)
  4. Linux环境搭建和编码

    喜欢(594) 浏览(4604)
  5. slice介绍和使用

    喜欢(521) 浏览(1517)

最新评论

  1. visual studio配置boost库 secondtonone1:是的,您说的是对的,windows平台要采用msvc方式。
  2. interface应用 secondtonone1:interface是万能类型,但是使用时要转换为实际类型来使用。interface丰富了go的多态特性,也降低了传统面向对象语言的耦合性。
  3. asio多线程模式IOThreadPool secondtonone1:这么优秀吗
  4. 线程基础 secondtonone1:谢谢,笔误已修复
  5. golang 函数介绍 secondtonone1:函数是go中的一等公民,作为新兴语言,go摒弃了面向对象的一些糟粕,采取接口方式编程,而接口方式编程都是基于函数的,参数为interface,进而达到泛型作用,比如sort排序,只需要传入的参数满足sort所需interface的规定即可,需实现Len, Swap, Less三个方法,只要实现了这三个方法都可以用来做sort排序的参数。
  6. Linux环境搭建和编码 恋恋风辰:Linux环境下go的安装比较简单,可以不用设置GOPATH环境变量,后期我们学习go mod 之后就拜托了go文件目录的限制了。
  7. 类和对象 陈宇航:支持!!!!
  8. asio实现http服务器 secondtonone1:我认为IO复用节省了线程资源,不用像传统服务器一样为每个连接单独创立线程,而是统一通过epoll或者iocp通知。
  9. 双链表实现LRU算法 secondtonone1:双链表插入和删除节点是本篇的难点,多多练习即可。
  10. 面试题汇总(一) secondtonone1:看到网络上经常提问的go的问题,做了一下汇总,结合自己的经验给出的答案,如有纰漏,望指正批评。
  11. C++ 类的拷贝构造、赋值运算、单例模式 secondtonone1:好的,已修复。
  12. 再谈单例模式 secondtonone1:是的,C++11以后返回局部static变量对象能保证线程安全了。
  13. 构造函数 secondtonone1:构造函数是类的基础知识,要着重掌握
  14. 解决博客回复区被脚本注入的问题 secondtonone1:走到现在我忽然明白一个道理,无论工作也好生活也罢,最重要的是开心,即使一份安稳的工作不能给我带来事业上的积累也要合理的舍弃,所以我还是想去做喜欢的方向。
  15. 线程安全的无锁栈 secondtonone1:谢谢支持,如果pop的次数大于push的次数是会让线程处于重试的,这个是测试用例,必须满足push和pop的次数相同,实际情况不会这么使用。栈的设计没有问题。
  16. 创建项目和编译 secondtonone1:谢谢支持
  17. C++ 线程管控 secondtonone1:好的,已修复,写的时候马虎了,谢谢指正。
  18. 使用mongo secondtonone1:mongo操作是程序员必备的基础技能,包括增删改查,以及较为复杂的查询,分组查询,条件查询,模糊查询,文档内查询等,本文结合自己实际开发经验做了整理。
  19. slice介绍和使用 恋恋风辰:切片作为引用类型极大的提高了数据传递的效率和性能,但也要注意切片的浅拷贝隐患,算是一把双刃剑,这世间的常态就是在两极之间寻求一种稳定。
  20. 堆排序 secondtonone1:堆排序非常实用,定时器就是这个原理制作的。

B站

个人微信

个人公众号