SparkSQL与Hive整合_hive.hiveutils: initializing hivemetastoreconnecti-CSDN博客

网站介绍:文章浏览阅读887次。SparkSQL与Hive整合Spark SQL与Hive整合后,可以在Spark SQL中使用HiveQL轻松操作数据仓库。与Hive不同的是,Hive的执行引擎为MapReduce,而Spark SQL的执行引擎为Spark RDD。Spark SQL与Hive的整合比较简单,总体来说只需要以下两步:(1)将$HIVE_HOM..._hive.hiveutils: initializing hivemetastoreconnection version 2.1 using spark