| | | |

2018年3月6日

sparksql

摘要：上传文件到hdfs： hadoop fs -put /root/people.json / /root/people.json：本地路径 /：hdfs路径阅读全文

posted @ 2018-03-06 18:00 kayy 阅读(118) 评论(0) 推荐(0)

pyspark连接hdfs

摘要： from pyspark import SparkContext from pyspark import SparkConf string_test = 'pyspark_test' conf = SparkConf().setAppName(string_test).setMaster('yarn 阅读全文

posted @ 2018-03-06 14:58 kayy 阅读(547) 评论(0) 推荐(0)