[大数据] Hive 物化视图

开发: C++知识库 Java知识库 JavaScript Python PHP知识库人工智能区块链大数据移动开发嵌入式开发工具数据结构与算法开发测试游戏开发网络协议系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑笔记本显卡显示器固态硬盘硬盘耳机手机 iphone vivo oppo 小米华为单反装机图拉丁

-> 大数据 -> Hive 物化视图 -> 正文阅读

[大数据]Hive 物化视图

物化视图作为Hive3.x的新特性，可以将查询的结果保存到一张表上，供客户端之后如果查询同样的数据时，就可以直接返回结果，而不用再执行MR程序，效率极高。

但在使用物化视图时需要注意几点：外部表不能用来创建物化视图、必须是事务表才能用来创建物化视图

drop table if exists student_trans;

create table student_trans (
    sno int,
    sname string,
    sdept string
) clustered by (sno) into 2 buckets stored as orc TBLPROPERTIES ('transactional'='true');

insert overwrite table student_trans select num, name, dept from student;

--对student_trans建立聚合物化视图
create MATERIALIZED VIEW student_trans_agg
as select sdept, count(*) as sdept_cnt from student_trans group by sdept;

这里有个很奇怪的现象，如果在建立物化视图的select语句加上where，就会发现物化视图并不会自动重写query?

show materialized views;

--验证禁用物化视图自动重写
alter materialized view student_trans_agg disable rewrite;

--开启物化视图自动重写
alter materialized view student_trans_agg enable rewrite;

drop materialized view student_trans_agg;