[大数据]2021SC@SDUSC HBase项目分析：compact流程分析（三）

2021SC@SDUSC

Compact介绍

Compact介绍

Compact是指HBase表中HRegion上某个Column Family下，部分或全部HFiles的合并。它是由于数据在持续写入后，MemStore达到一定阈值，被flush到磁盘生成hfile，随着hfile的逐渐增多，如果不做处理，将会严重影响HBase数据读取的效率。所以，在HBase系统内部，需要定期在满足一定条件的情况下，或者人为手动触发，将这许多文件合并成一个大文件，即compact。

Compact分类

Compact分为两种：Minor Compact、Major Compact。

Minor Compact：选择部分小的、相邻的hfile合并为一个大文件；

Major Compat：将store中所有的hfile文件合并成一个大的文件，并且这个阶段会将过期的数据、已删除的数据和超出版本的数据进行物理上的清除。

compact源码分析