IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> Redis源码阅读(三)- 事件模型 -> 正文阅读

[大数据]Redis源码阅读(三)- 事件模型

目录

Redis事件

文件事件

文件事件结构定义

文件事件处理流程

时间事件

时间事件结构定义

事件处理过程

Redis事件处理流程

Redis6多线程

开启IO多线程

总结


Redis事件

??????? Redis是一个基于事件驱动的服务模型,内部抽象为两种事件类型:文件事件、时间事件。

事件结构定义

//redis事件结构定义
/* State of an event based program */
typedef struct aeEventLoop {
    int maxfd;   /* highest file descriptor currently registered */
    int setsize; /* max number of file descriptors tracked */
    long long timeEventNextId;
    aeFileEvent *events; /* Registered events */
    aeFiredEvent *fired; /* Fired events */
    aeTimeEvent *timeEventHead;
    int stop;
    void *apidata; /* This is used for polling API specific data */
    aeBeforeSleepProc *beforesleep;
    aeBeforeSleepProc *aftersleep;
    int flags;
} aeEventLoop;

文件事件

????????文件事件是Redis对网络处理的抽象。Redis基于IO多路复用模型,也就是我们经常说的nio,当有网络请求是会产生对应的事件,Redis监听到事件产生后开始处理网络请求,如没有网络请求则阻塞当前线程一段时间,这里调用系统的epoll_wait方法实现。

文件事件结构定义

/* File event structure */
typedef struct aeFileEvent {
    int mask; /* one of AE_(READABLE|WRITABLE|BARRIER) */
    aeFileProc *rfileProc;
    aeFileProc *wfileProc;
    void *clientData;
} aeFileEvent;

文件事件处理流程

时间事件

???????? 时间事件是Redis对定时任务的抽象,定时任务每100ms执行一次,定时任务处理函数为:serverCron。Redis定时任务主要包括但不限定于以下工作:

  • 过期Key删除
  • 持久化
  • 渐进式rehash
  • 客户端超时处理
  • 一些统计相关工作
  • 集群相关操作和failover

时间事件结构定义

/* Time event structure */
typedef struct aeTimeEvent {
    long long id; /* time event identifier. */
    monotime when;
    aeTimeProc *timeProc;
    aeEventFinalizerProc *finalizerProc;
    void *clientData;
    struct aeTimeEvent *prev;
    struct aeTimeEvent *next;
    int refcount; /* refcount to prevent timer events from being
  		   * freed in recursive time event calls. */
} aeTimeEvent;

事件处理过程

??????? 众所周知,Redis是单线程模型,所以Redis的时间事件和文件事件是串行处理的。所以Redis最怕的就是阻塞,如果有命令阻塞Redis的主线程,可能会导致超时统计延后,也就是假死的情况,对服务的影响是非常严重的!

Redis事件处理流程

Redis 6多线程

??????? Redis 6提供了IO多线程的新特性,这里需要注意IO多线程并不是完全的多线程,核心操作还是单线程执行的。由于Redis是纯内存操作,所以Redis的命令执行是非常快的,但IO操作占了大部分的CPU时间,多线程的操作主要针对IO操作,客户端Read,Write放到多线程中执行,大致流程如下:

开启IO多线程

??????? IO多线程的特性是默认关闭的,可以通过参数:io-threads-do-reads开启IO多线程,通过参数:io-threads设置IO线程数。官方给出的建议是至少有4个以上核心才建议开启该特性,如果有4个核心建议设置2-3个IO线程,8个核心设置6个IO线程,需要注意的是核心数并不是越多越好,8个以上核心不会有更大的帮助了!???????

总结

??????? Redis使用非阻塞的事件模型,保证了单线程的处理效率。使用时要避免长命令阻塞主线程的问题。

??????? 另外,关于是否开启多线程的特性,我个人是这么理解的,当前内存越来越便宜的前提下,如果你有更多的核心,开启多实例是不是更好的选择?如果你的数据不可分,只能单实例部署,那么IO多线程确实能发挥一定的多核优势!

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-01-24 10:57:59  更:2022-01-24 10:59:57 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年10日历 -2024/10/21 16:14:30-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码