五, Hive-数据的导入和导出

5.1 数据导入

法1, 向表中装载数据(load)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-oP6YViMW-1627981666146)(2021-08-03-14-33-12.png)]

[案例实操]

创建表
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-W8nNN6Hh-1627981666150)(2021-08-03-14-44-50.png)]
加载本地文件到此表中
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-XHj93LrH-1627981666151)(2021-08-03-14-48-41.png)]
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-X280mdEU-1627981666155)(2021-08-03-14-49-10.png)]
加载HDFS文件到此表中不进行覆盖
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-9bEVEknn-1627981666156)(2021-08-03-14-54-09.png)]
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-voKAdli7-1627981666157)(2021-08-03-14-55-59.png)]

执行load之后, HDFS的inpat路径中就不再含有这个数据文件, 因为这个文件被移动到hdfs中存储hive数据的目录中(在hdfs中默认路径为 /user/hive/warehouse/表名)去了.

加载HDFS文件到此表中进行覆盖
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Y0zMQblu-1627981666158)(2021-08-03-15-13-03.png)]
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-YLatfdne-1627981666159)(2021-08-03-15-12-57.png)]

法2, 通过查询语句向表中插入数据(insert)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-7Ef7M75G-1627981666160)(2021-08-03-15-14-08.png)]

法3, 通过查询表来新建表(As select 语句)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-vXfXlX7K-1627981666161)(2021-08-03-15-58-05.png)]

法3, 创建表时通过 Location指定加载数据路径(通常这个表是外部表)

准备文件
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-rFg47p3D-1627981666162)(2021-08-03-15-50-26.png)]
通过 Location指定加载数据路径
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-qNkFAclG-1627981666163)(2021-08-03-15-50-09.png)]

法4, 从HDFS文件中Import(导入)数据到指定 Hive表中

前置条件: 先Export 导出

5.2 数据导出

法1, Insert 导出

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-vLogLXVM-1627981666164)(2021-08-03-16-15-53.png)]

法2, Hadoop命令导出到本地(hdfs 的下载)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-tTYBsvrB-1627981666165)(2021-08-03-16-25-17.png)]

法3, Hive shell命令导出

注意: 图中小错误, 一个>是覆盖. 两个>>是追加
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-XXslrv5O-1627981666292)(2021-08-03-16-24-56.png)]

法4, Export 导出到HDFS上

export table xx to ‘path’

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-BTIBtN58-1627981666166)(2021-08-03-16-35-28.png)]
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-80w6mp97-1627981666167)(2021-08-03-16-35-12.png)]

import table xx from ‘path’

千万要注意. import到的表要求: 要么不存在, 要么不包含数据(空表)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-4bUNRYOl-1627981666168)(2021-08-03-16-45-40.png)]

新表
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-c0G3peBQ-1627981666169)(2021-08-03-16-46-11.png)]
已存在的空表
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-aMxt5fTM-1627981666170)(2021-08-03-16-49-39.png)]