IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> Houdini: Fooling Deep Structured Prediction Models -> 正文阅读

[人工智能]Houdini: Fooling Deep Structured Prediction Models

2017

Houdini 用来解决对抗样本中 评估指标存在的组合及不可微的问题,组合及不可微的问题是不能通过梯度下降的方法生成对抗样本的。

例如:语音识别,姿势估计,语音分割等。

对于此类问题由两种解决方案:

  1. 用一个连续的、可微的代理损失函数来代替任务损失、该代理函数必须保证能收敛到任务损失(task loss)
  2. 直接优化任务损失,例如距离损失最小化等。

两种解决方案的局限性:

  1. 在一些场景中,代理损失函数的连续性不能得到保证(语音识别,姿势估计,语音分割)
  2. 直接最小化的方法涉及的计算量大且对超参数的很敏感

Houdini:

在这里插入图片描述
以往的寻找对抗样本的任务可以表示为:
在这里插入图片描述
但是该任务损失组合数量大,难以直接求解,因此用可微的代理损失求解:
在这里插入图片描述
代理损失包含了两个部分:
1.边缘随机
代表实际目标与预测目标的分数的差值小于正态分布Y的概率,它反映了对预测结果的信心.
2.任务损失
当P接近1时或目标标签的分数无边界增长时,houdini会收敛至任务损失.这是其他的损失所没有的独特性质.

Houdini微分得:

在这里插入图片描述

要计算表达式右边,我们只需要计算Houdini相对于它的输入(网络的输出)的导数。其余部分通过反向传播获得。损失对网络输出的导数为

在这里插入图片描述
在这里插入图片描述
当预测目标的分数 与 实际相接近是 e = 1

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2021-10-24 14:56:26  更:2021-10-24 14:57:57 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/27 8:27:46-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码