IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> mongoDB的三种基础备份方法 -> 正文阅读

[大数据]mongoDB的三种基础备份方法

目录

一、快照

二、数据文件拷贝

三、mongodump与mongorestore


一、快照

? ? ? ? 使用快照进行备份是最常用的一种方法,很多企业的备份产品都是基于此(爱数、commvault等)。下面以爱数的备份原理图为例。

  1. 管理控制台启动备份任务。
  2. 控制台向各物理客户端的发送备份命令,各个客户端查找本机节点是否为 Primary(主)节点,如果不是 Primary(主)节点,该节点备份任务结束。
  3. Primary(主)节点所在客户端获取 MongoDB 数据目录所在的文件系统,为该文件系统创建快照卷并挂载到一个临时目录。
  4. 客户端传输该临时目录的数据到存储服务器。
  5. 客户端完成备份,上报任务备份情况到管理控制台,结束整个备份任务。

?该方法的主要有点是速度快,使用方便。

缺点也比较明显:

1、副本集内所有的主机都必须保留? > 500MB 的VG卷空间。虽然只有主节点进行备份操作,但在副本集架构下所有节点都有可能成为主节点。

2、无法实现增量备份,理由很简单,其无法确定数据的变动,无法明确这个时间点的数据与上一次备份时间的的数据具体发生了哪些变化。

3、只能对mongod实例下的所有数据库进行集体备份,无法实现细粒度的数据库备份。

4、快照的数据恢复也是比较繁琐的,特别是异地恢复。

二、数据文件拷贝

? ? ? ? 这种方法也是比较简单直接的,直接将mongoDB数据目录下所有的数据拷贝出来。但有几点需要注意。

1、拷贝操作发生前需要对数据库进行加锁操作。加锁后无法对数据库进行写操作,可能会影响正常业务。拷贝完成后记得解锁。

2、恢复时需要停止mongod实例。

? ? ? ? 这种方法的缺点与快照类似。具体的操作,如下所示:

# 进入mongo shell
db.fsyncLock()

# 退回到linux shell
# 将mongo的dbpath全部拷贝到缓存目录
cp -R /var/lib/mongo/* /backup

# 进入mongo shell
db.fsyncUnlock()

三、mongodump与mongorestore

? ? ? ? 这两个都是mongo集成的备份与恢复工具,功能也是十分的强大。

? ? ? ? 使用mongodump可以将数据库数据导出为二进制的bson格式的文件。并且支持collection粒度的备份。

? ? ? ? mongorestore是配合mongodump使用的,只要是mongodump导出的数据都可以进行回复。

? ? ? ? 而且配合mongoDB副本集模式下开启的oplog功能,可以实现增量备份。

? ? ? ? 他俩的唯一缺点就是性能太低了,远不如上面两种方法。github上面有go语言实现的源码,若精力充足可以阅读并进行优化。

? ? ? ? 由于篇幅的问题(懒),具体的使用方法见下面的链接mongodump — MongoDB Manualhttps://www.mongodb.com/docs/v4.4/reference/program/mongodump/
mongorestore — MongoDB Manualhttps://www.mongodb.com/docs/v4.4/reference/program/mongorestore/

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-06-26 16:58:01  更:2022-06-26 16:59:32 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/23 16:31:56-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码