IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> Pytorch 模型加载 -> 正文阅读

[人工智能]Pytorch 模型加载

Pytorch加载模型

当在特殊环境下会出现模型无法通过设置pretrained=True的方式来完成自动加载,这时我们需要完成手动加载。我们假设模型设置为:

class Model(nn.Module):
    def __init__(self, num_classes=21):
        super(Model, self).__init__()
        self.backbone = timm.create_model('swin_tiny_patch4_window7_224', pretrained=True)
        self.fc = nn.Linear(1000, num_classes)

    def forward(self, x):
        x = self.backbone(x)
        x = self.fc(x)
        return x

使用timm包下的SwinTransformer作为例子

	model = Model()
    model_dict = model.state_dict()
    print(model_dict.keys())    ## 可以通过.keys()来查看模型结构的state_dict的名称
    resume = True
    if resume:
        print("Resume from checkpoint...")
        checkpoint = torch.load('/root/.cache/torch/hub/checkpoints/swin_tiny_patch4_window7_224.pth')
		# 首先使用torch.load()加载模型的state_dict
		print(checkpoint.key())       #通过.key()查看名称
        model_param = checkpoint['model']
        model_param = {"backbone." + k: v for k, v in model_param.items() if "backbone." + k in model_dict}
		# "backbone." + k 中的"backbone."是根据模型参数和模型结构的state_dict差异决定的
        
        model_dict.update(model_param)
        model.load_state_dict(model_param)       # 固定搭配
        print("====>loaded checkpoint ")
    else:
        print("====>no checkpoint found.")

即可完成模型参数的加载。

同时也可以将上方的代码直接加入 class 中

class Model(nn.Module):
    def __init__(self, num_classes=45):
        super(Model, self).__init__()
        model = timm.create_model('swin_tiny_patch4_window7_224', pretrained=False)
        model_dict = model.state_dict()
        resume = True
        if resume:
            print("Resume from checkpoint...")
            checkpoint = torch.load('/root/.cache/torch/hub/checkpoints/swin_tiny_patch4_window7_224.pth')
            model_param = checkpoint['model']
            model_param = {k: v for k, v in model_param.items() if k in model_dict}  
            # 在此处就不需要添加多余的前缀
            model_dict.update(model_param)
            model.load_state_dict(model_param)
            print("====>loaded checkpoint ")
        else:
            print("====>no checkpoint found.")

        self.backbone = model
        self.fc = nn.Linear(1000, num_classes)

    def forward(self, x):
        x = self.backbone(x)
        x = self.fc(x)
        return x

当前还存在一个问题,就是如果输入的模型numworks不设置为1000的话,就会导致在加载模型的最后一层报错
在这里插入图片描述
使用model.load_state_dict(model_param, False)也无法完成加载。

该问题尚未解决,期待解决方案!

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2021-08-18 12:42:30  更:2021-08-18 12:44:58 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/1 10:22:33-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码