IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> meta-learning 和 few-shot learning -> 正文阅读

[人工智能]meta-learning 和 few-shot learning

meta-learning

machine learning:由给定的learning algorithm f 和D_train学得函数f*,f*能完成当前任务

meta-learning:学一个函数F,F能找到适用于当前任务的learning algorithm f,再由f和D_train学得函数f*,f*能完成当前任务

machine learning的目标是学得f*,meta-learning的目标是学得F

为什么F能找到 适用于当前任务的learning algorithm f ?因为它通过学习之前个若干个machine?learning任务,学会了一些learning skills,有了这些learning skills,就能很快找到新任务上(也就是当前任务)的learning algorithm

few-shot learning

large-scale training set, few-shot support set, one query:

preview

在large-scale的training set上训练一个Siamese network,得到一个feature extractor f

n-way k-shot的support set(few-shot,指k很小,比如k=1)中的n个类别没有在training set中出现过,想要知道query sample属于support set中的哪一类?

将query sample和support set中的各类样本进行对比,对比的方式为:计算support set中各类的feature vector和query sample的feature vector的余弦相似度:

preview

preview

当然这样效果可能还不太好,因为feature extractor从未见过support set中的这些类,所以可以用support set中的少量样本来fine tune一个softmax分类器:

preview

softmax分类器中的权重初始化为M

preview

训练出softmax分类器的W和b后,最后query sample的预测为:

preview

meta-learning和few-shot learning的关系:

?比如上面的few-shot learning的例子,是有了large-scale training set上进行图片相似度判断(相当于之前任务)的经验,要在新的类别上判断query sample所属类别(相当于新任务),即使新类每类只有少量support样本也能迅速学会如何判断新类类别

参考:

【Meta Learning学习笔记】Meta Learning详解_a312863063的博客-CSDN博客

Few-shot Learning 小白入门笔记 - 知乎?

求问meta-learning和few-shot learning的关系是什么? - 知乎?

  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2021-10-18 17:24:05  更:2021-10-18 17:26:11 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/27 8:44:56-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码