IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> 《Generalized Focal Loss V2》论文笔记 -> 正文阅读

[人工智能]《Generalized Focal Loss V2》论文笔记

参考代码:GFocalV2

1. 概述

导读:这篇文章是在之前V1版本的基础上增强了目标检测中定位质量估计能力。在之前的一些网络中会在分类分支和检测分支的特征图基础上实现定位质量的估计(如IoUNet、FCOS),但是会存在training和infer阶段的gap。对此在GFocal V1的版本中提出了质量感知的预测头,从而弥补了training和infer的gap。而这篇文章更进一步使用4个边界框的概率分布作为额外信息输入,使得质量感知分支能够获取检测框边界的信息,从而进一步提升质量感知分支的准确度。

在之前的一些工作中使用分类或是边界框回归分支特征图作为输入组合,并在此基础上实现对检测框质量的感知,其结构见下图左图所示:
在这里插入图片描述
但是上图的左图却存在回归分支是否能准确表达检测框的问题,对此这里考虑了GFocal V1版本中4条边的概率分布与实际检测框边界质量的关系,通过文章的分析若边界框的概率分布呈现尖峰分布情况则表明该检测框边界的定位质量是较高的,反之亦然。因而可以利用GFocal V1生成的检测框边界分布去描述实际的检测质量,因而对上图左图中回归分支部分进行修改,便得到了右图的模式,既是使用检测边界框的概率分布来生成更好的检测质量评估。

2. 方法设计

2.1 pipeline

文章的pipeline见下图所示,其主要的改进点在检测质量评估分支上,也就是显式使用了检测框的概率分布特征,也就是下图中红色虚线部分展示的部分(DGQP:Distribution-Guided Quality Predictor)。
在这里插入图片描述

2.2 DGQP运算过程

使用GFocal中描述到的检测边界框的概率分布描述,可以将目标检测涉及到的4条边界的分布描述为: P w = [ P w ( y 0 ) , … , P w ( y n ) ] , ? w ∈ [ l , r , b , t ] P^w=[P^w(y_0),\dots,P^w(y_n)],\forall{w}\in[l,r,b,t] Pw=[Pw(y0?),,Pw(yn?)],?w[l,r,b,t]。则可以生成最大距离为 n n n的特征图,那么如何选择其中最具代表行的特征输入到后面的网络呢?文章给出的方法是使用top-k的方法,也就是在数量为 n n n的分布上选择概率值top-k的特征图,之后再concat上这些特征图的mean,从而筛选出对应的特征图,其筛选过程可以参考下图:
在这里插入图片描述
对于其中concat是mean还是var文章做了实验,其实验结果见下表所示:
在这里插入图片描述
那么接下来就是4个方向的抽取出来的特征图concat起来组成特征 F ∈ R 4 ( k + 1 ) F\in R^{4(k+1)} FR4(k+1),描述为:
F = C o n c a t ( { T o p k m ( P w ) ∣ w ∈ { l , r , b , t } } ) F=Concat(\{Topkm(P^w)|w\in\{l,r,b,t\}\}) F=Concat({Topkm(Pw)w{l,r,b,t}})
在上面的过程中会涉及到 k , p k,p k,p值的选择,其选择也是有对应的实验的,其实验结果见下表所示:
在这里插入图片描述
接下来经过几个全连接实现特征编码与维度匹配,得到文章中提到的IoU scalar描述 I ∈ R H ? W ? 1 I\in R^{H*W*1} IRH?W?1
I = F = σ ( W 2 δ ( W 1 F ) ) I=\mathcal{F}=\sigma(W_2\delta(W_1F)) I=F=σ(W2?δ(W1?F))
之后与分类的特征 C ∈ R H ? W ? C m C\in R^{H*W*C_m} CRH?W?Cm?,之后进行element-wise mul得到感知特征描述 J J J。其实对于特征的融合策略是有两种的,见下图:
在这里插入图片描述
那么它们分别对性能的影响见下表所示:
在这里插入图片描述

3. 实验结果

文章提出的方法对于检测网络的性能影响见下表:
在这里插入图片描述

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2021-12-14 15:56:46  更:2021-12-14 15:57:30 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/27 1:36:10-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码