IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> redis-shake 使用中遇到的错误整理 -> 正文阅读

[大数据]redis-shake 使用中遇到的错误整理

redis-shake 使用中遇到的错误整理

本文记录一下,笔者在使用 redis-shake 遇到的一些错误

redis-shake decode 错误测试

在运行 redis-shake 的 decode 模式时出现下面错误,但是百度和谷歌找不到答案,错误信息:

2022/04/23 09:45:49 [PANIC] parse rdb header error
[error]: EOF
	5   github.com/alibaba/RedisShake/pkg/rdb/reader.go:102
			github.com/alibaba/RedisShake/pkg/rdb.(*rdbReader).Read
	4   io/io.go:328
			io.ReadAtLeast
	3   io/io.go:347
			io.ReadFull
	2   github.com/alibaba/RedisShake/pkg/rdb/reader.go:445
			github.com/alibaba/RedisShake/pkg/rdb.(*rdbReader).readFull
	1   github.com/alibaba/RedisShake/pkg/rdb/loader.go:34
			github.com/alibaba/RedisShake/pkg/rdb.(*Loader).Header
	0   github.com/alibaba/RedisShake/redis-shake/common/utils.go:953
			github.com/alibaba/RedisShake/redis-shake/common.NewRDBLoader.func1

从报错信息上看,是在 github.com/alibaba/RedisShake/redis-shake/common/utils.go 953 行代码出错,而且还是 io 读取文件出错

这个错误就很奇怪了,为什么读取的 rdb 文件会出错?因为笔者的 rdb 文件是运行 redis-shake 的 dump 模式得到的

这时笔者想到 redis-shake 是开源,就拉取官方源代码进行测试,这里是把 decode 部分代码简化出来,并不是完整流程,只是到笔者报错的地方

把文件读取的流程整理出来,从运行 redis-shake 的机器上拉取这个 rdb 文件进行测试

当笔者把代码都切割出来后,重新在运行 go 程序,发现并没有报错,正常读取了文件;然后重新在 redis-shake 的机器上运行 decode 模式,发现正常了

真是让人哭笑不得,不过后面思考了一下出现这个问题原因,应该是这个 rdb 文件格式问题

因为笔者后面测试的 rdb 文件其实是重新运行 dump 模式生成的新文件,一开始使用的 rdb 文件是前一天生成并且多次运行 dump 覆盖的,可能导致有一些问题

结论

redis-shake 生成的 rdb 文件尽量别多次覆盖模式,每一次最好都重新命名

笔者代码

https://github.com/MoGD2018/go-study/tree/main/go-redis-shake-decode

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-04-24 09:31:36  更:2022-04-24 09:32:53 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 3:10:59-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码