注：术语来源请参照《人工智能论文术语集》
术语内容
- Generalized
- 广义的 ～ XLNET就是广义的自回归预训练模型。
- denoising autoencoding
- 去噪自编码 ～ 之前有提过，是一种大的模型划分类型，BERT
就是。
- corrupting the input
- 破坏了输入 ～ XLNET认为mask破坏了输入。
- conventional
- 传统的 ～ 用在指代传统的模型上。
- Intuitive
- 凭直觉的 ～ 一些理论推断。
- To formalize the idea
- 为了公式化这个想法 ～ 就是某些理论表达成数学表达式。
- shared across
- 交叉共享～ 在模型结构上进行参数共享。
- In other word
- 换句话说 ～ 不要把word深度解读！
- corresponding to
- 对应 ～ 指某些对应关系。
- encounter text sequence
- 遇见文本序列 ～ 指模型只以一些具有顺序的文本作为输入。
被虐的还不过瘾？快关注我，查看更多粉丝可见内容！！！