IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> CentOS 安装部署 Hive -> 正文阅读

[大数据]CentOS 安装部署 Hive

一、安装 Hive

1. 解压安装包

将 Hive 安装包解压并移动到 /usr/local/src 路径,并重命名目录。

tar -zxvf apache-hive-2.3.4-bin.tar.gz 
mv apache-hive-2.3.4-bin /usr/local/src/
cd /usr/local/src/
mv apache-hive-2.3.4-bin/ hive

2. 配置环境变量

  • 设置 spark 环境变量,只对 root 用户生效,修改 /root/.bash_profile 文件。
  • 如果要设置全局变量则修改 /etc/profile 文件
vi /root/.bash_profile

在文末追加以下文字:

# set hive environment
export HIVE_HOME=/usr/local/src/hive
export PATH=$PATH:$HIVE_HOME/bin
  • 让环境变量生效
source /root/.bash_profile 

二、配置 Hive

1. 配置 hive-site.xml 文件

  • 修改 hive-site.xml 配置文件,将 MySQL 数据库作为 Hive 元数据库。
  • 没有 hive-site.xml ,就将 Hive 安装目录里 hive-default.xml.template 文件更名为 hive-site.xml。
cd /usr/local/src/hive
cd conf/
cp hive-default.xml.template hive-site.xml
vi hive-site.xml
  • 把文件里原来的所有文字全部删完,不然会报各种错误。
  • 删完之后,在 hive-site.xml 文件中添加内容:
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>

  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
    <description>Mysql用户名</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>123456</value>
    <description>Mysql密码</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true</value>
    <description>Mysql登录端口</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
    <description>jdfb驱动</description>
  </property>
  <property>
    <name>datanucleus.schema.autoCreateAll</name>
    <value>true</value>
    <description>我也不知道干啥的,加了不报错</description>
  </property>
  <property>
    <name>hive.metastore.schema.verification</name>
    <value>false</value>
    <description>我也不知道干啥的,加了不报错</description>
  </property>
  <property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/user/hive_remote/warehouse</value>
    <description>我也不知道干啥的,加了不报错</description>
  </property>
  <property>
    <name>hive.metastore.local</name>
    <value>false</value>
    <description>我也不知道干啥的,加了不报错</description>
  </property>

</configuration>

2. 复制 mysql 驱动程序

  • 必须将 mysql-connector-java-5.1.38.jar 拷贝到 hive\lib 目录下。
  • 没有 mysql-connector 包可以百度下载。
cd /root/download
mv mysql-connector-java-5.1.38.jar /usr/local/src/hive/lib/

3. 初始化 Hive 元数据

  • 并通过 schematool 命令初始化 Hive 元数据
schematool -dbType mysql -initSchema

提示 schemaTool completed 则是初始化完成。
在这里插入图片描述
第一次运行如果报错,请确定是否把 hive-site.xml 原来的文字全部删完,或者是没有复制驱动程序。

四、运行

输入 hive 运行,如果进入 hive 命令行则配置完成。
在这里插入图片描述

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-03-13 21:52:47  更:2022-03-13 21:56:24 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 7:39:49-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码