IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 游戏开发 -> 批量解压ImageNet ISLVRC2012数据集的下载并按标准布局解压 -> 正文阅读

[游戏开发]批量解压ImageNet ISLVRC2012数据集的下载并按标准布局解压

ImageNet ISLVRC2012的下载并按标准布局解压

最近在github中扒寻大佬代码,准备进行复现,发现很多都使用了imagenet这个数据集。之前因为数据集较为庞大,且下载困难(需要使用学校邮箱账户注册申请下载,且在外网),便一直没有使用,这次下定决心迈过这个坎决定处理一下这个数据集。


好在网络的发达,有大佬将数据集存入了迅雷,并无私的将资源奉献了出来


前言

因为我使用的系统是windows,找到的解压命令很多都linux系统中的,为了能在windows系统下使用,因此下载Git这个软件,在其中的Git Bash中使用以下命令,因为Git Bash集成了很多linux的命令,方便我们的使用。
Git如图所示,第一个就是Git Bash。

在这里插入图片描述


提示:以下是本篇文章正文内容,下面案例可供参考

一、ImageNet ISLVRC2012的下载

ImageNet ISLVRC2012的下载
以下两个链接为迅雷链接,复制打开迅雷后就可下载,因为数据集较大(训练集+验证集有144G),下载需要大量时间。

训练集:
http://academictorrents.com/download/a306397ccf9c2ead27155983c254227c0fd938e2.torrent
验证集
http://academictorrents.com/download/5d6d0df7ed81efd49ca99ea4737e0ae5e3a5f2e5.torrent

二、解压步骤

1.布局要求

论文中要求的解压格式如下显示:

要求的标准布局如下:

/path/to/imagenet/
  train/
    class1/
      img1.jpeg
    class2/
      img2.jpeg
  val/
    class1/
      img3.jpeg
    class2/
      img4.jpeg

直接解压的话往往是各个类的图片混合在一起在一个文件夹下,因为有百万张图片之巨,单纯的用人工进行分类无异于是天方夜谭。
在这里插入图片描述

2.数据集解压

将下载的数据集压缩包放置在同一文件夹下:

在这里插入图片描述

(1)解压训练集

在这个文件夹下右击,点击Git Bash Here
在这里插入图片描述
打开的Git Bash Here窗口显示如图:
在这里插入图片描述
将以下命令输入到窗口中:

mkdir train && mv ILSVRC2012_img_train.tar train/ && cd train
tar -xvf ILSVRC2012_img_train.tar && rm -f ILSVRC2012_img_train.tar
find . -name "*.tar" | while read NAME ; do mkdir -p "${NAME%.tar}"; tar -xvf "${NAME}" -C "${NAME%.tar}"; rm -f "${NAME}"; done
cd ..

三行命令逐行输入进Git Bash Here窗口中。
在这里插入图片描述

解压后的图片按类保存在每个单独文件夹中
在这里插入图片描述

(1)解压验证集

与解压训练集相同,使用以下命令。

wget https://raw.githubusercontent.com/soumith/imagenetloader.torch/master/valprep.sh

mkdir val && tar -xvf ILSVRC2012_img_val.tar -C val && mv valprep.sh val && cd val && bash valprep.sh

由于第一行要下载的valprep.sh文件在外网(valprep.sh文件中保存的就是图片按类生成文件夹的布局),很难下载,因此我在这里上传了迅雷链接,将下载后的文件放入和验证集压缩包同一文件夹下,这样直接在Git Bash Here窗口使用第二个命令就可以完成解压。

链接:https://pan.xunlei.com/s/VMkus56ePQ4LMJUIXheBkhXSA1 提取码:k9ej

解压后的测试集如图所示:
在这里插入图片描述


总结

https://www.cnblogs.com/luruiyuan/p/12373328.html

  游戏开发 最新文章
6、英飞凌-AURIX-TC3XX: PWM实验之使用 GT
泛型自动装箱
CubeMax添加Rtthread操作系统 组件STM32F10
python多线程编程:如何优雅地关闭线程
数据类型隐式转换导致的阻塞
WebAPi实现多文件上传,并附带参数
from origin ‘null‘ has been blocked by
UE4 蓝图调用C++函数(附带项目工程)
Unity学习笔记(一)结构体的简单理解与应用
【Memory As a Programming Concept in C a
上一篇文章      下一篇文章      查看所有文章
加:2021-10-03 17:21:42  更:2021-10-03 17:23:43 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/28 2:29:26-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码