- 链接地址:https://blog.csdn.net/weixin_38097878/article/details/106202690
- 链接标题:SparkSQL与Hive整合(Spark-On-Hive)_spark on hive 链接的那个服务-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:6703
文章浏览阅读796次。Spark-On-Hive为什么要把Spark和Hive整合?Hive将SQL转成MR程序,执行速度相对较慢原理: 使用SparkSQL整合Hive,其实就是让SparkSQL去加载Hive的元数据库,然后通过SparkSQL执行引擎去操作Hive表内的数据。 所以,首先要开启Hive的元数据服务,让SparkSQL能够加载到元数据。1、Hive开启MetaStore服务修改:hive/conf/hive-site.xml,新增加以下配置 <property> _spark on hive 链接的那个服务
版权声明:本文发布于特牛生活网 内容均来源于互联网 如有侵权联系删除