IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 人工智能 -> OneHotEncoder简单用法 -> 正文阅读

[人工智能]OneHotEncoder简单用法

1.sklearn.preprocessing.OneHotEncoder

class sklearn.preprocessing.OneHotEncoder(*, categories='auto', drop=None, sparse=True, dtype=<class 'numpy.float64'>, handle_unknown='error')

将特征类别编码成 one-hot 数值数组

这个转换器的输入应当是数值型数组或字符串数组(二维的),表示分类(离散)特征所取的值。这些特征被使用 one-hot 策略编码。这将为每个类别创建二进制列。每一列认为是一个 feature。默认情况下,encoder 根据每个特征中的唯一值生成类别。你也可以手动指定类别 categories。针对每个 feature 的二进制列,只有一个位置为1,其余位置都是 0。

我认为,下面的参数和属性是常用的,其余参数没有详细和属性没有详细介绍

handle_unknown{‘error’, ‘ignore’}, default=’error’ 在转换过程中遇到未知分类特征时,是引发错误还是忽略(默认为引发)。当此参数设置为“ignore”并且在转换过程中遇到未知类别时,这一特征的 one-hot 编码列将全置为 0。在逆变换中,未知类别将表示为 None
参数说明
属性说明
categories_list of arrays 拟合期间确定的每个特征的类别(按X中特征的顺序,并与转换的输出相对应)。这包括下拉列表中指定的类别(如果有)。

使用前需要先导入

from sklearn.preprocessing import OneHotEncoder

2.例子

2.1.数值型整数

  • 整数

    encoder = OneHotEncoder()
    encoder.fit([
        [0, 2, 1, 12],
        [2, 3, 5, 3],
        [1, 3, 2, 12],
        [1, 2, 4, 3]
    ])
    encoded_vector = encoder.transform([[2, 3, 5, 3]]).toarray()
    print("\n Encoded vector =", encoded_vector)
    >> Encoded vector = [[0. 0. 1. 0. 1. 0. 0. 0. 1. 1. 0.]]
    
    • 默认情况下,将每一列认为是一个 feature,一列中的每个不同的值,都认为是一个 category
    • 第一列中有[0, 1, 2],三种值,因为需要三位数,我们将第一列编码为
      • 0:[1, 0, 0]
      • 1:[0, 1, 0]
      • 2:[0, 0, 1]
    • 第三列中有 [1, 2, 4, 5] 四种值,因此需要四位数,我们将第三列编码为
      • 1:[1, 0, 0, 0]
      • 2:[0, 1, 0, 0]
      • 4:[0, 0, 1, 0]
      • 5:[0, 0, 0, 1]

    同时,我们可以查看 encoder 的属性 categories:代表拟合期间确定的每个feature的categories

    print(encoder.categories_)
    [array([0, 1, 2]), array([2, 3]), array([1, 2, 4, 5]), array([ 3, 12])]>>
    
    • 根据 categories_ 的输出,和上面的例子可以看到,每个 featurecategory 是从小到大排列,并进行编码的。每个 feature 中的数在 categories_ 中的位置就是该数编码后,1的位置。
  • 小数:同上面相同,这里证明,也可以针对小数进行编码

    encoder = OneHotEncoder()
    encoder.fit([
        [0, 2.1, 1, 12],
        [1, 3.2, 5, 3],
        [2, 3.3, 2, 12],
        [1, 2.1, 4, 3]
    ])
    encoded_vector = encoder.transform([[2, 3.2, 5, 3]]).toarray()
    print("\n Encoded vector =", encoded_vector)
    >>  Encoded vector = [[0. 0. 1. 0. 1. 0. 0. 0. 0. 1. 1. 0.]]
    

2.2.字符串型数组

encoder = OneHotEncoder()
encoder.fit([['体育', '军事'],
             ['计科','开心'],
             ['娱乐', '军事']])
encoded_vector = encoder.transform([['计科', '开心']]).toarray()
print("\n Encoded vector =", encoded_vector)
print(encoder.categories_)
>>Encoded vector = [[0. 0. 1. 0. 1.]]
>>[array(['体育', '娱乐', '计科'], dtype=object), array(['军事', '开心'], dtype=object)]
  • 可以看到,字符串型与数值型类似,编码方式也相同

2.3.handle_unknown

  • 默认情况下,handle_unknow = error,当遇到 transform时遇到fit中没有出现过的特征类别时,会直接报错

  • handle_unknown = ignore

    encoder = OneHotEncoder(handle_unknown='ignore')
    encoder.fit([['体育', '军事'],
                 ['计科','开心'],
                 ['娱乐', '军事']])
    encoded_vector = encoder.transform([['计科', '难过']]).toarray()
    print("\n Encoded vector =", encoded_vector)
    print(encoder.categories_)
    >>Encoded vector = [[0. 0. 1. 0. 0.]]
    >>[array(['体育', '娱乐', '计科'], dtype=object), array(['军事', '开心'], dtype=object)]
    
    • 可以看到,transform 时遇到了 fit 第二列中没有出现过的 难过,因此,将第二列编码的位置都置为 0。

2.4.反向transform

通过编码,来解码出 feature 对应的类别

encoder = OneHotEncoder(handle_unknown='ignore')
encoder.fit([['体育', '军事'],
             ['计科','开心'],
             ['娱乐', '军事']])
encoded_vector = encoder.transform([['计科', '难过']]).toarray()
print(encoder.inverse_transform([[0, 0, 1, 0, 0]]))
>>[['计科' None]]
  • 可以看到,在handle_unknown='ignore'时,将没见过的编码解码成了 None,默认handle_unknown下,直接报错
encoder = OneHotEncoder(handle_unknown='ignore')
encoder.fit([['体育', '军事'],
             ['计科','开心'],
             ['娱乐', '军事']])
encoded_vector = encoder.transform([['计科', '开心']]).toarray()
print(encoder.inverse_transform([[0, 0, 1, 0, 1]]))
>>[['计科' '开心']]
  • 这是正常情况
  人工智能 最新文章
2022吴恩达机器学习课程——第二课(神经网
第十五章 规则学习
FixMatch: Simplifying Semi-Supervised Le
数据挖掘Java——Kmeans算法的实现
大脑皮层的分割方法
【翻译】GPT-3是如何工作的
论文笔记:TEACHTEXT: CrossModal Generaliz
python从零学(六)
详解Python 3.x 导入(import)
【答读者问27】backtrader不支持最新版本的
上一篇文章      下一篇文章      查看所有文章
加:2022-04-04 12:11:32  更:2022-04-04 12:15:13 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/26 11:33:26-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码