[大数据]Spark集群整合hive以及java.lang.ClassNotFoundException: org.apache.tez.dag.api.SessionNotRunning问题解决

通过spark操作hive中的数据

在集群（服务器）上整合

步骤

1.如果在spark的bin目录下存在metastore_db或者spark-warehouse文件，将这两个文件删除

2.导入配置文件

1.hive/conf/hive-site.xml
2.hadoop/etc/hadoop/core-site.xml和hdfs-site.xml
将上述三个文件放入spark/conf目录下，这样就整合好了

3.问题

如果遇到以下问题

将spark下的conf目录中的hive-site.xml里引擎的配置改为mr,这样问题就解决了

4.使用

1.使用spark/bin目录下的spark-shell

2.使用spark-sql可以直接使用sql语句进行操作