IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> Java知识库 -> netty4核心源码分析第四篇一NioEventLoopGroup创建详解 -> 正文阅读

[Java知识库]netty4核心源码分析第四篇一NioEventLoopGroup创建详解

源码分析一Group构造函数

  • 线程数=2*core
  • SelectorProvider.provider底层通过DefaultSelectorProvider.create创建KQueueSelectorProvider对象
public NioEventLoopGroup() {0表示采用默认配置,2*core
    this(0);
}

public NioEventLoopGroup(int nThreads) {
    不传默认DefaultThreadFactory
    this(nThreads, null);
}

public NioEventLoopGroup(int nThreads, ThreadFactory threadFactory) {
    KQueueSelectorProvider
    this(nThreads, threadFactory, SelectorProvider.provider());
}

public NioEventLoopGroup(
        int nThreads, ThreadFactory threadFactory, final SelectorProvider selectorProvider) {
    this(nThreads, threadFactory, selectorProvider, DefaultSelectStrategyFactory.INSTANCE);
}

public NioEventLoopGroup(int nThreads, ThreadFactory threadFactory,
    final SelectorProvider selectorProvider, final SelectStrategyFactory selectStrategyFactory) {
    MultithreadEventLoopGroup处理
    super(nThreads, threadFactory, selectorProvider, selectStrategyFactory, RejectedExecutionHandlers.reject());
}

protected MultithreadEventLoopGroup(int nThreads, ThreadFactory threadFactory, Object... args) {
    MultithreadEventLoopGroup在交给父类MultithreadEventExecutorGroup处理
    super(nThreads == 0? DEFAULT_EVENT_LOOP_THREADS : nThreads, threadFactory, args);
}

源码分析一Group父类构造函数

原理图

  • 初始化children和chooser属性
    在这里插入图片描述

MultithreadEventExecutorGroup构造函数

  • 初始化eventloop数组

  • 初始化线程选择器(轮询)

  • newChild初始化eventloop数组元素

  • 创建eventLoop失败则优雅关闭线程组

  • 通过Future处理异步回调

protected MultithreadEventExecutorGroup(int nThreads, ThreadFactory threadFactory, Object... args) {
    if (nThreads <= 0) {
        throw new IllegalArgumentException(String.format("nThreads: %d (expected: > 0)", nThreads));
    }

    if (threadFactory == null) {
        创建DefaultThreadFactory
        threadFactory = newDefaultThreadFactory();
    }
    step-1: 创建指定大小的eventloop数组
    children = new SingleThreadEventExecutor[nThreads];
    step-2: 每次从eventloop数组选择线程的策略:轮询
    if (isPowerOfTwo(children.length)) {
        2的次方则采用与运算加速性能
        chooser = new PowerOfTwoEventExecutorChooser();
    } else {
        chooser = new GenericEventExecutorChooser();
    }

    for (int i = 0; i < nThreads; i ++) {
        boolean success = false;
        try {
            step-3: 通过new child初始化eventloop数组的元素
            NioEventLoop或者EpollEventLoop等
            children[i] = newChild(threadFactory, args);
            success = true;
        } catch (Exception e) {
            throw new IllegalStateException("failed to create a child event loop", e);
        } finally {
            创建失败则优雅关机
            if (!success) {
                for (int j = 0; j < i; j ++) {
                    children[j].shutdownGracefully();
                }

                for (int j = 0; j < i; j ++) {
                    EventExecutor e = children[j];
                    try {
                        while (!e.isTerminated()) {
                            e.awaitTermination(Integer.MAX_VALUE, TimeUnit.SECONDS);
                        }
                    } catch (InterruptedException interrupted) {
                        Thread.currentThread().interrupt();
                        break;
                    }
                }
            }
        }
    }
    
    step-4: 通过listener异步监听terminationFuture的操作
    final FutureListener<Object> terminationListener = new FutureListener<Object>() {
        @Override
        public void operationComplete(Future<Object> future) throws Exception {
            if (terminatedChildren.incrementAndGet() == children.length) {
                terminationFuture.setSuccess(null);
            }
        }
    };
    for (EventExecutor e: children) {
        e.terminationFuture().addListener(terminationListener);
    }
}

源码分析一newChild

  • 初始化NioEventLoop
@Override
protected EventExecutor newChild(ThreadFactory threadFactory, Object... args) throws Exception {
    SelectorProvider用于创建Seletor
    return new NioEventLoop(this, threadFactory, (SelectorProvider) args[0],
        ((SelectStrategyFactory) args[1]).newSelectStrategy(), (RejectedExecutionHandler) args[2]);
}

源码分析一NioEventLoop创建

  • 父类创建线程
  • 子类负责创建选择器
NioEventLoop(NioEventLoopGroup parent, ThreadFactory threadFactory, SelectorProvider selectorProvider,
             SelectStrategy strategy, RejectedExecutionHandler rejectedExecutionHandler) {
    父类创建线程
    super(parent, threadFactory, false, DEFAULT_MAX_PENDING_TASKS, rejectedExecutionHandler);
    if (selectorProvider == null) {
        throw new NullPointerException("selectorProvider");
    }
    if (strategy == null) {
        throw new NullPointerException("selectStrategy");
    }
    子类负责创建选择器
    provider = selectorProvider;
    // 创建选择器
    final SelectorTuple selectorTuple = openSelector();
    selector = selectorTuple.selector;
    unwrappedSelector = selectorTuple.unwrappedSelector;
    selectStrategy = strategy;
}

源码分析一父类构造SingleThreadEventExecutor

原理图

  • 创建线程 与任务队列

  • 创建优化后的选择器
    在这里插入图片描述

  • 初始化线程执行SingleThreadEventExecutor.this.run

  • 初始化任务队列taskQueue

  • EventLoop既可以处理io事件,也可以处理taskQueue普通任务

protected SingleThreadEventExecutor(
            EventExecutorGroup parent, ThreadFactory threadFactory, boolean addTaskWakesUp, int maxPendingTasks,
            RejectedExecutionHandler rejectedHandler) {
    ...... 删除其他代码
    创建eventLoop的线程
    thread = threadFactory.newThread(new Runnable() {
        @Override
        public void run() {
            boolean success = false;
            updateLastExecutionTime();
            try {
                自旋执行抽象方法,实现为NioEventLoop.run
                SingleThreadEventExecutor.this.run();
                success = true;
            } catch (Throwable t) {
                logger.warn("Unexpected exception from an event executor: ", t);
            } finally {
                ...... 删除大量代码
            }
        }
    });
    ...... 删除其他代码
    ...... 初始化任务队列
    taskQueue = newTaskQueue();
    rejectedExecutionHandler = ObjectUtil.checkNotNull(rejectedHandler, "rejectedHandler");
}

源码分析一openSelector

原理图

  • 被修改的selectKeys使用数组替代集合,遍历性能更好

  • selectKey的remove也无需手动调用,每次selector.select会先清空上次的selectKeys
    在这里插入图片描述

  • 创建选择器KQueueSelectorImpl

  • 通过反射使用SelectedSelectionKeySet替换publicSelectedKeys属性类

执行select方法通过SelectedSelectionKeySet包装类会自动清空selectionKeys元素在这里插入图片描述

private SelectorTuple openSelector() {
        final Selector unwrappedSelector;
    step-1: 通过new KQueueSelectorImpl创建Selector
    unwrappedSelector = provider.openSelector();
    if (DISABLE_KEYSET_OPTIMIZATION) {
        开启优化开关,需要将系统属性io.netty.noKeySetOptimization设置为true
        return new SelectorTuple(unwrappedSelector);
    }
    step-2: 通过已经优化的SelectedSelectionKeySet替换sun.nio.ch.SelectorImpl对象中的selectedKeys和publicSelectedKeys两个HashSet集合
    a  优化主要是数据结构改变,用数组替代了HashSet,
    b  重写了add()iterator()方法,使数组的遍历效率更高。
    c  同时对原生selectorKeys集合的remove不需要在手动remove
    final SelectedSelectionKeySet selectedKeySet = new SelectedSelectionKeySet();
    
    ...... 删除大量代码
    修改unwrappedSelector属性类为SelectedSelectionKeySet
    
    Field selectedKeysField = selectorImplClass.getDeclaredField("selectedKeys");
    Field publicSelectedKeysField = selectorImplClass.getDeclaredField("publicSelectedKeys");
                    
    selectedKeysField.set(unwrappedSelector, selectedKeySet);
    publicSelectedKeysField.set(unwrappedSelector, selectedKeySet);
    ...... 删除大量代码
    return new SelectorTuple(unwrappedSelector,
                             new SelectedSelectionKeySetSelector(unwrappedSelector, selectedKeySet));
}

总结

  • NioEventLoopGroup创建的核心是创建NioEventLoop线程组【初始化线程和任务队列】
  • 为每个NioEventLoop创建选择器并通过SelectedSelectionKeySet优化选择器数据结构

扩展点一EventLoop.run

  Java知识库 最新文章
计算距离春节还有多长时间
系统开发系列 之WebService(spring框架+ma
springBoot+Cache(自定义有效时间配置)
SpringBoot整合mybatis实现增删改查、分页查
spring教程
SpringBoot+Vue实现美食交流网站的设计与实
虚拟机内存结构以及虚拟机中销毁和新建对象
SpringMVC---原理
小李同学: Java如何按多个字段分组
打印票据--java
上一篇文章      下一篇文章      查看所有文章
加:2022-03-22 20:22:50  更:2022-03-22 20:23:49 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 8:33:13-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码