[系统运维]Shell脚本：linux删除大量文件方法总结

一、构建测试文件

1、构造文件和文件夹

#! /bin/bash

path="/home/parasaga/testtmp"

if [ ! -d path ];
	then
		mkdir -p $path
fi

#一共生成50万个文件
#一级目录500个，每个一级目录下100个二级目录，每个二级目录下100个文件
for  index in {1..500000}
do
	echo $index
    num=`expr $index / 1000`
	num1=$(( $index % 100 ))
    tmpPath="${path}/data_${num}/data_${num1}"
	echo $tmpPath
    if [ ! -d $tmpPath ];
        then
            mkdir -p $tmpPath
    fi
     #输出一个数字到目标文件
    echo "${index}" > $tmpPath/bk-${index}.txt
done

2、只构造文件

path="/home/parasaga/testtmp"

if [ ! -d path ];
	then
		mkdir -p $path
fi

#生成多少个文件
for  index in {1..10}
do
    echo $index > /home/parasaga/testtmp/$index.txt
done

二、测试删除

1、方法一：使用rm命令

path="/home/parasaga/testtmp"
start_time=$(date +%s)
rm -rf $path
end_time=$(date +%s)
cost_time=$[ $end_time-$start_time ]
echo "清空文件共消耗：$(($cost_time/60))min $(($cost_time%60))s"

2、方法二：使用rsync命令

blankPath="/home/parasaga/blank/"
deletePath="/home/data/log/"
if [ ! -d "$blankPath" ]; then
mkdir $blankPath
fi
start_time=$(date +%s)
rsync --delete-before -a -H -v --progress --stats $blankPath $deletePath
end_time=$(date +%s)
cost_time=$[ $end_time-$start_time ]
echo "清空文件共消耗：$(($cost_time/60))min $(($cost_time%60))s"

3、方法三：使用find with delete命令

deletePath="/home/data/log/"
find $deletePath -type f -delete

关注博主即可阅读全文