IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> hive内部表与外部表 -> 正文阅读

[大数据]hive内部表与外部表

一.内部表和外部表的区别

1.表的存储位置

  • 内部表存在hdfs指定位置(/user/hive/warehouse/),而且内部表的数据不共享数据;
  • 外部表存在外部(共享数据),可以通过外部工具查看,例如sqlyog等等(创建外部表时需要指定位置,也可以不指定放在默认位置)

2.在删除表的操作上

  • 内部表删除时,表的元数据(mysql)以及hdfs上的数据(原始数据)一并删除;
  • 外部表删除时,只删除表的结构(元数据),并没有清除存放在hdfs上的数据(原始数据)
    外部表相对生产环境来说更加安全些,数据组织也更加灵活,方便共享源数据,而且节省HDFS的内存,加快MapReduce处理速度

二.动手实践

1.创建一个带有分区的内部表

注:内部表的数据默认放在hdfs的/user/hive/warehouse目录下

create table name_map2(name string,info map<string,string>)
row format delimited fields terminated by ‘\t’ collection items terminated by ‘,’
map keys terminated by ‘:’;

在这里插入图片描述

2.创建一个外部表

create external table name_map1(name string,info map<string,string>)
row format delimited fields terminated by ‘\t’
collection items terminated by ‘,’
map keys terminated by ‘:’
location ‘hdfs://ip:host/name_map1’;

在这里插入图片描述

3.分别删除内部表和外部表

  • drop table name_map2;
    删除以后在/user/hive/warehouse/test.db/目录下没有name_map的数据

  • drop table name_map1;
    删除以后在hdfs://ip:host/name_map1目录下仍然有name_map1的数据

在这里插入图片描述

4.内外部表转换

  • 查看表的信息:desc formatted table_name;
    在这里插入图片描述

  • 将内部表转换为外部表:alter table name_map2 set tblproperties(‘EXTERNAL’=‘TRUE’);
    在这里插入图片描述

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-07-04 22:59:49  更:2022-07-04 23:00:20 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/19 20:03:07-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码