IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 系统运维 -> 【Linux命令】mac/linux使用split和cat命令拆分合并tar.gz文件 -> 正文阅读

[系统运维]【Linux命令】mac/linux使用split和cat命令拆分合并tar.gz文件

mac/linux使用split和cat命令拆分合并tar.gz文件

问题描述:因为大文件上传到云服务器很花费时间,而且还可能传输失败,我们可以用分割文件的方法,对一个个小文件进行上传,再在linux服务器下合并起来。

假设我有一个tar.gz文件,它的大小为242mb。我想要分割为2个文件,每个150M(或以下)。

  1. 分割
split -b 150m -d -a 2 raw_sample.csv.tar.gz
"""
-b 150m:表示设置每个分割包的大小,单位还是可以k
-d :参数指定生成的分割包后缀为数字的形式,比如x0、x1。不设置的话可能为xa、ab
-a 2:来设定序列的长度(默认值是2),如果为1,就是名字为x0和x00的区别
"""

结果生成名字为x00、x01这两个文件。

  1. 合并
# 后面的名字为你想设置的合并后的文件名。
cat x00 x01 > raw_out.csv.tar.gz
# 解压缩,命令格式:tar -zxvf 压缩文件名.tar.gz
tar -zxvf raw_out.csv.tar.gz

小提示??:如果分割的文件太多,比如说我分割了x00~x23的文件,先利用ftp(或sftp)上传到服务器后,使用python脚本,生成cat x00~x23 > xxx.tar.gz命令,再复制到服务器命令行中,就可以啦!

  1. md5校验

看看两个文件是否一样,一样就没关系了。

md5 raw_sample.csv.tar.gz
# MD5 (raw_sample.csv.tar.gz) = d8919b32d2f24cc9ec1d6ea8bc002925
md5 raw_out.csv.tar.gz
# MD5 (raw_out.csv.tar.gz) = d8919b32d2f24cc9ec1d6ea8bc002925

在这里插入图片描述

可以看到本地的文件和服务器解压后的文件一样大,说明我们成功了。(图片中是FileZilla,一个FTP传输软件)

参考文献

  1. https://blog.csdn.net/u011035397/article/details/119966882
  系统运维 最新文章
配置小型公司网络WLAN基本业务(AC通过三层
如何在交付运维过程中建立风险底线意识,提
快速传输大文件,怎么通过网络传大文件给对
从游戏服务端角度分析移动同步(状态同步)
MySQL使用MyCat实现分库分表
如何用DWDM射频光纤技术实现200公里外的站点
国内顺畅下载k8s.gcr.io的镜像
自动化测试appium
ctfshow ssrf
Linux操作系统学习之实用指令(Centos7/8均
上一篇文章      下一篇文章      查看所有文章
加:2022-05-09 13:09:20  更:2022-05-09 13:11:44 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/15 18:39:46-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码