IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> Learning Discriminative and Generalizable Representations by Spatial-ChannelPartition for PersonReID -> 正文阅读

[人工智能]Learning Discriminative and Generalizable Representations by Spatial-ChannelPartition for PersonReID

1. 贡献

在行人RE-ID的任务中,通常会结合局部和全局特征来克服”只使用全局特征时出现的错失关键部位和misalignment的情况“。使用这种全局局部相结合的方式可以产生更好的性能。

  • Previously: 局部特征提取模型关注在空间划分(spatial partition)上
  • Recently:局部特征关注在处理通道信息(channel partition)上,eg,Group Normalization, channel attention

然而,通道划分并没有提供足够的注意力在行人重识别领域。

注:

通道划分不会从特定的身体部位提取局部特征,而是保留指示这些高级概念存在的特征。通过将通道分成几个组并训练单独的通道组,可以消除每个通道组中的语义概念之间的相关性。因此,信道划分允许进行语义概念到概念的匹配(例如,有或没有包带),这可以补充空间划分的表示。

本文做了充足的实验来提取通道划分的特性,贡献点如下:

  • 做了对比实验对比spatial, channel paritions和注意力机制,得出如下结论:
    • 注意力机制可能会去除掉有用的辅助信息(secondary info)
    • 与传统的空间划分对比,通道划分对保存辅助信息的表现更好
  • 空间和通道划分结合来提高网络学习辅助信息的能力。通过在金字塔结构中采用多个空间-通道划分,提出了一个端到端的网络

2. 外观表示(Appearance Representations)学习

  • 使得appearance representations更加鲁棒常用方法:
    • 选择合适的损失函数
    • 基于局部空间的模型设计(Spatial Part Based Models)
  • 分区表示(Partitioned Representations)的学习
    • 空间划分:使得更多的区域被关注
    • 通道划分:关注了更高层的语义信息,eg,下图d与e获得了具有语义概念的肩带和鞋子。

由于通道分区的激活区域与空间分区的激活区域不同,我们可以推断,当联合训练时,从这两种分区提取的局部特征是互补的。因此,作者提出了结合两种划分方式(spatial-channel partition),结果如下表所示:

结论:

  • Channel partition比spatial partition的表现要好,因为基于因为语义概念到概念的匹配比身体部位到部位的匹配对错位更具鲁棒性。Spatial-channel partition可以进一步提高性能
  • 注意机制引导神经网络定位图像中最重要的区域。因此,辅助信息可能被注意机制忽略。Spatial-channel partition可以保留更多的辅助信息。

3. 模型-Spatial and Channel Partition Representation Network (SCR)

?Total loss:

?

?

注:

对SCR模型进行全局和局部特征的联合训练有助于构建更健壮的特征表示。从局部提取的局部特征对未对准和视点变化非常敏感。对于局部他在来说,寻找hardest positive and negative pairs是非常具有调整性的。例如,当两个人穿着相似的白色T恤时,我们不能只看上半身。因此,triplet loss仅用于全局特征。Softmax交叉熵损失有助于估计小部件中特定特征的存在,这使得它更适合于局部特征。

4. 实验结果

消融实验:

对比实验

?

?

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2021-07-30 12:44:50  更:2021-07-30 12:45:18 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/5 15:19:43-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码