IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> HWC格式(Torch) -> 正文阅读

[人工智能]HWC格式(Torch)

人工智能小白,不对之处,希望各位大佬不吝赐教^_^

目录

前言?

?正文

1.关于HWC维度的理解

2.为什么pytorch中transforms.ToTorch要把(H,W,C)的矩阵转为(C,H,W)??[2]

3.如何进行格式的转换?

3.1 opencv python 把图(cv2下)BGR转RGB,且HWC转CHW【3】.

3.2 Torch将HWC格式转为CHW

附录

推荐文章


前言?

最近在做一个图像分类的任务,其中涉及到对于数据集的处理,利用到了均值和标准差。但是其中的均值和标准差是一个数组,如下所示。

# 各通道的均值
CIFAR100_TRAIN_MEAN = (0.5070751592371323, 0.48654887331495095, 0.4409178433670343)
# 各通道的标准差
CIFAR100_TRAIN_STD = (0.2673342858792401, 0.2564384629170883, 0.27615047132568404)

查阅资料发现,其中每个数值代表一个通道的均值和标准差,因此我猜测是RGB通道对应的数值。后来,通过研读整个项目代码,发现了一个令我困扰的地方。

# 数据增强
    transform_train = transforms.Compose([
        # transforms.ToPILImage(),
        # Crop the given PIL Image at a random location.
        # 32*32,padding=4,图像上下左右像素均填充一个像素
        transforms.RandomCrop(32, padding=4),
        # 随机水平翻转,默认值是0.5
        transforms.RandomHorizontalFlip(),
        # (-degrees,+degrees)
        transforms.RandomRotation(15),
        
        # 数据的格式转换和标准化 HWC => CHW。
        # 把图片转换为张量,同时进行归一化操作,把每个通道 0~255 的值归一化为0~1
        transforms.ToTensor(),
        transforms.Normalize(mean, std)  # 图像张量的归一化
    ])

由于我之前对于张量tensor以及torch不太熟悉,查阅资料补充了对上述代码的理解。

?正文

下面将依次介绍HWC格式的理解以及torch图像格式的转换,我认为这是一个循序渐进的过程。

1.关于HWC维度的理解

我们首先需要明确的是各个参数的含义,HWC可以看作是一幅图像的shape[1],H表示图像的高度(height),W表示图像的宽度(Width),而C表示一幅图像的通道数(Channel)

举个小栗子

hwc=[5,5,3]?的含义是什么呢?

大家可以思考一下,以图像为例,那么高宽都是5,3就是其中的通道数。因此我们也可以理解为3个?5*5 大小的特征图。?

2.为什么pytorch中transforms.ToTorch要把(H,W,C)的矩阵转为(C,H,W)??[2]

此问题的回答来源于知乎[2].

  • 因为pytorch很多函数都是设计成假设你的输入是 (c,h,w)的格式,当然你如果不嫌麻烦的话可以每次要用这些函数的时候转成chw格式,但我想这会比你输入的时候就转成chw要麻烦很多。
  • 至于为什么pytorch选择设计成chw而不是hwc(毕竟传统的读图片的函数opencv的cv2.imread或者sklearn的imread都是读成hwc的格式的)这点确实比较令初学者困惑。个人感觉是因为pytorch做矩阵加减乘除以及卷积等运算是需要调用cuda和cudnn的函数的,而这些接口都设成成chw格式了,故而pytorch为了方便起见也设计成chw格式了。
  • 那新问题就来了,cuda和cudnn为什么设计成chw格式呢?我想这是由于涉及到图片操作的都是和卷积相关的,而内部做卷积运算的加速设计成chw在操作上会比hwc处理起来更容易,更快。题主如果想进一步了解可以google一下cudnn的卷积实现。

3.如何进行格式的转换?

3.1 opencv python 把图(cv2下)BGR转RGB,且HWC转CHW【3】.

img = cv2.imread("test.jpg")
img_ = img[:,:,::-1].transpose((2,0,1))
  • 在opencv里,图格式HWC,其余都是CHW,故使用方法transpose((2,0,1)),transpose(2,0,1)就是读入第三维的数C作为第一维的值,读入第一维的数H作为第二维,读入第二维的数作为第三维W,如果再高维,就再按照输入的读取顺序来读【4】。
  • img[:,:,::-1]对应H、W、C,彩图是3通道,即C是3层。opencv里对应BGR,故通过C通道的 ::-1 就是把BGR转为RGB,其中[::-1] 代表顺序相反操作。

3.2 Torch将HWC格式转为CHW

from PIL import Image
from torchvision.transforms import ToTensor

img = Image.open('image_path')
#产生的PIL_image格式数据的取值范围是[0,255]
#形状(shape)是[h, w, c]
#像素顺序是RGB

tensor = ToTensor()(PIL_img)

# 或者
np_data = np.asarray(PIL_img)
tensor = ToTensor()(np_data)

ToTensor()接收PIL格式的数据,或者是直接从PIL转来的np.ndarray格式数据,只要保证进来的数据取值范围是[0, 255], 形状是[h, w, c],像素顺序是RGB,它就会帮你做下面的事情[5]

  • 取值范围[0, 255] / 255.0 => [0, 1.0], 数据格式从int8变成了float32
  • 形状(shape)转为[c, h, w]
  • 像素顺序依旧是RGB

附录

  1. Pytorch数据前后处理整理?
  2. 为什么pytorch中transforms.ToTorch要把(H,W,C)的矩阵转为(C,H,W)?
  3. opencv python 把图(cv2下)BGR转RGB,且HWC转CHW
  4. Python numpy.transpose 详解
  5. PIL skimage opencv torch各种图像格式的转换


?推荐文章

  1. 700套个人简历模板(考研保研工作)
  2. 人工智能2019年秋季学期期末复习知识点整理
  3. Fisher线性分类器的设计与实现,感知器算法的设计实现

以上就是我理解的内容啦,欢迎大家关注【小果果学长】微信公众号,获取更多资料和源码,希望大家点赞收藏加关注,如有不对的地方,非常开心和您交流。

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2021-08-01 14:30:37  更:2021-08-01 14:30:52 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/2 16:56:45-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码