IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> Java知识库 -> 使用 BeanstalkMQ 初步替代 Sidekiq -> 正文阅读

[Java知识库]使用 BeanstalkMQ 初步替代 Sidekiq

对于 Rails 开发者来说,默认会使用 Sidekiq 作为后台作业处理系统,通常来说 Sidekiq 在性能和功能方面都足够优秀。

但是还是有一些 Sidekiq 无法满足的需求,比如统一队列中的任务设置不同的优先级以及延迟调度作业等。

担心的事情还是发生了。最近一个线上业务的表现越来越差,简单说就是一个通知发生业务,需要做到有些通知需要优先发送,有些通知延迟发送。

之前开 Rails API 文档时,通过 backburner 了解到 Beanstalk,Beanstalk 是一个高性能、轻量级的、分布式的、内存型的消息队列系统。最初设计的目的是想通过后台异步执行耗时的任务来降低高容量 Web 应用系统的页面访问延迟。

基于 backburner 、beanstald 还有其他与 beanstald 相关的项目, 拼凑出了 BeanstalkMQ,目标是做一个跨语言任务调度平台。零零碎碎做了点整合工作,由于工作原因,暂时就没深入开发 BeanstalkMQ。

刚好最近的业务问题可以用 BeanstalkMQ 解决。上午还在犹豫要不要用 BeanstalkMQ 替代 Sidekiq,中午左右业务要报警了,就决定下午把部分队列任务切换到 BeanstalkMQ。

相比 Sidekiq 使用 Redis 作为消息队里,使用 BeanstalkMQ 时要自动搭建 mq 服务。beanstald 默认不提供授权认证功能,我把 beanstald mq 服务部署到 k8s 上,不再外网暴露,相对安全,然后再部署一个 beanstald mq web 管理端,基本上就把基础搭建好了。基于 backburner ,我做了一个更适合自己业务的 beanstalk_worker gem。具体队列的 worker 比较容易实现,就不再介绍了。

如果从性能上来说,BeanstalkMQ 不如 Sidekiq,这是由队列的实现机制决定的,改进的空间不大。不过 BeanstalkMQ 的特性比较丰富,比如支持延迟调度,job 优先级等。之所以说是初步替换,是因为还没用到延迟调度和 job 优先级。再观察两天,如果 BeanstalkMQ 性能和稳定性达到预期,那么就可以完全替换掉 Sidekiq 了。

由于 beanstald 的协议相对简单,所以方便实现 Go、Rust、Node.js、Python 等语言对应的客户端。

针对公司的项目,如果 Sidekiq 能满足你的需求,不建议你去折腾 BeanstalkMQ。如果是个人项目可以玩玩 BeanstalkMQ。

  Java知识库 最新文章
计算距离春节还有多长时间
系统开发系列 之WebService(spring框架+ma
springBoot+Cache(自定义有效时间配置)
SpringBoot整合mybatis实现增删改查、分页查
spring教程
SpringBoot+Vue实现美食交流网站的设计与实
虚拟机内存结构以及虚拟机中销毁和新建对象
SpringMVC---原理
小李同学: Java如何按多个字段分组
打印票据--java
上一篇文章      下一篇文章      查看所有文章
加:2021-12-05 11:54:42  更:2021-12-05 11:56:24 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 3:53:19-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码