IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> Cifar10完整模型搭建 -> 正文阅读

[人工智能]Cifar10完整模型搭建

1.模型结构?

# 搭建神经网络
import torch
from torch import nn


class Module(nn.Module):
    def __init__(self):
        super().__init__()
        self.model = nn.Sequential(
            nn.Conv2d(3, 32, kernel_size=(5, 5), padding=2, stride=1, dilation=1),
            nn.MaxPool2d(kernel_size=(2, 2)),
            nn.Conv2d(32, 32, kernel_size=(5, 5), padding=2),
            nn.MaxPool2d(kernel_size=(2, 2)),
            nn.Conv2d(32, 64, kernel_size=(5, 5), padding=2),
            nn.MaxPool2d(kernel_size=(2, 2)),
            nn.Flatten(),
            nn.Linear(1024, 64),
            nn.Linear(64, 10),
        )

    def forward(self, input):
        output = self.model(input)
        return output

# 测试模型是否准确
if __name__== '__main__':
    module = Module()
    input = torch.ones((64,3,32,32))
    output = module(input)
    print(output.shape)

2.train

import torch
import torchvision
from torch.utils.tensorboard import SummaryWriter

from model import *
# 准备训练数据集
from torch import nn
from torch.utils.data import DataLoader

train_data = torchvision.datasets.CIFAR10(root='E:\QQPCmgr\Desktop\Android_learn\pytorch\dataset',train=True,transform=torchvision.transforms.ToTensor()
                                          ,download=True)
test_data  = torchvision.datasets.CIFAR10(root='E:\QQPCmgr\Desktop\Android_learn\pytorch\dataset',train=False,transform=torchvision.transforms.ToTensor()
                                          ,download=True)
train_data_size = len(train_data)
test_data_size = len(test_data)
print('训练数据集的长度为{}'.format(train_data_size))
print('测试数据集的长度为{}'.format(test_data_size))

# 用dataLoader加载数据集
train_data_Loader = DataLoader(train_data,batch_size=64)
test_data_Loader = DataLoader(test_data,batch_size=64)

# 创建网络模型
module = Module()
# 损失函数
loss_fn = nn.CrossEntropyLoss()
# 优化器(1*10^-2)
learning_rate = 1e-2
optimizer = torch.optim.SGD(module.parameters(),lr=learning_rate)

# 设置训练网络的一些参数,训练次数,测试次数,训练的轮数
train_step = 0
test_step = 0
epoch = 1

# 添加tensorboard
writer = SummaryWriter('logs')

for i in range(epoch):
    module.train()
    print("-----第{}轮训练开始-----".format(i+1))
    for data in train_data_Loader:
        imgs ,targets = data
        output = module(imgs)
        loss = loss_fn(output,targets)
        # 优化模型
        optimizer.zero_grad()
        loss.backward()
        optimizer.step()

        train_step = train_step+1
        if train_step %100 ==0:
            print('训练次数:{},LOSS={}'.format(train_step,loss),)
            writer.add_scalar("train_loss",loss.item(),train_step)
    # 每一轮训练后测试
    total_test_loss = 0
    # 整体正确率
    total_accuracy = 0
    # 测试模式
    module.eval()
    with torch.no_grad():
        for data in test_data_Loader:
            imgs ,targets = data
            output = module(imgs)
            loss = loss_fn(output,targets)
            total_test_loss = total_test_loss+loss

            accuracy = (output.argmax(1) == targets).sum()
            total_accuracy = total_accuracy +accuracy
        print("整体测试集上的Loss:{}".format(total_test_loss))
        print("整体测试集上的准确率为:{}".format(total_accuracy/test_data_size))
        test_step +=1
        writer.add_scalar("test_loss",total_test_loss,test_step)
        writer.add_scalar("测试准确率",total_accuracy/test_data_size,test_step)
        torch.save(module,"module_{}.pth".format(i+1))
        # 官方推荐的模型保存方式
        torch.save(module.state_dict(),"module_{}.pth".format(i+1))
        print("模型已保存")
writer.close()

?module.train()

module.eval()

with torch.no_grad()最好加上

因为在测试的时候,我们不需要梯度,不需要对参数进行优化

accuracy = (output.argmax(1) == targets).sum()

这行代码的意思如下:

argmax表示横向取最大值

先得到概率最大的Index->[0,1]

再用preds ==targets 比较,得到(false,true)

最后.sum求所有的true的个数之和

如果发现自己写的类不能引用,可以这样设置,把要引用的文件夹设置成source

  • 当使用官方推荐的转成字典格式的模型时,可以这样读取:
  • 先load模型参数,再初始化模型对象,最后用字典的方式去读取模型
import torch
from model import *

dict_modle = torch.load('module_1.pth')
module1 = Module()
module1.load_state_dict(dict_modle)
print(module1)

?

?

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2022-03-22 20:35:19  更:2022-03-22 20:38:13 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/26 13:23:36-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码