2019年8月5日
摘要: Spark 2.3.3 Kafka 2.11-1.0.2 Java jdk1.8.0_191 Hbase 1.2.11 阅读全文
posted @ 2019-08-05 17:11 庭明 阅读(148) 评论(0) 推荐(0) 编辑
摘要: 1.在脚本中导入pyspark的流程 import os import sys spark_name = os.environ.get('SPARK_HOME',None) # SPARK_HOME即spark的安装目录,不用到bin级别,一般为/usr/local/spark if not spa 阅读全文
posted @ 2019-08-05 16:05 庭明 阅读(3155) 评论(0) 推荐(0) 编辑