spark-sql与Hive元数据共享

版本：ambari2.7.5  HDP3.1.5

hive 3.1.0 spark 2.3.0

配置spark-sql命令行方式处理Hive数据。

 

 

参考：https://docs.cloudera.com/HDPDocuments/HDP3/HDP-3.1.5/integrating-hive/content/hive_configure_a_spark_hive_connection.html

若是使用spark-sql操作，atlas不能获取到表的血缘关系图。通过Hive操作可以获取到。