当前标签：spark

spark groupByKey 也是可以filter的

bonelee 2017-11-01 09:34 阅读:1073 评论:0 推荐:0

查看spark是否有僵尸进程，有的话，先杀掉。可以使用下面命令

bonelee 2017-10-31 19:22 阅读:1706 评论:0 推荐:0

spark 卡在spark context，运行出现spark Exception encountered while connecting to the server : javax.security.sasl.SaslException

bonelee 2017-09-29 09:10 阅读:2076 评论:1 推荐:0

pyspark kafka createDirectStream和createStream 区别

bonelee 2017-08-28 11:32 阅读:3094 评论:0 推荐:0

kafka 0.11 spark 2.11 streaming例子

bonelee 2017-08-26 15:47 阅读:1738 评论:1 推荐:0

sc.textFile("file:///home/spark/data.txt") Input path does not exist解决方法——submit 加参数 --master local 即可解决

bonelee 2017-08-14 14:26 阅读:1327 评论:0 推荐:0

pyspark MLlib踩坑之model predict+rdd map zip，zip使用尤其注意啊啊啊！

bonelee 2017-07-21 16:12 阅读:3055 评论:5 推荐:0

spark 按照key 分组然后统计每个key对应的最大、最小、平均值思路——使用groupby，或者reduceby

bonelee 2017-07-12 16:28 阅读:9314 评论:0 推荐:1

python spark 通过key来统计不同values个数

bonelee 2017-07-12 14:07 阅读:2852 评论:0 推荐:0

spark rdd median 中位数求解

bonelee 2017-07-12 10:47 阅读:3205 评论:0 推荐:0

python spark 求解最大最小平均

bonelee 2017-07-12 10:15 阅读:595 评论:0 推荐:0

python spark 求解最大最小平均中位数

bonelee 2017-07-12 09:50 阅读:1285 评论:0 推荐:0

我的spark python 决策树实例

bonelee 2017-07-11 16:44 阅读:2256 评论:0 推荐:0

python spark 随机森林入门demo

bonelee 2017-07-11 14:48 阅读:1624 评论:0 推荐:0

python spark 决策树入门demo

bonelee 2017-07-11 14:47 阅读:1471 评论:0 推荐:0

spark 决策树分类算法demo

bonelee 2017-07-11 11:43 阅读:2988 评论:0 推荐:0

深入理解groupByKey、reduceByKey区别——本质就是一个local machine的reduce操作

bonelee 2017-07-03 15:34 阅读:15263 评论:0 推荐:0

自定义Spark Partitioner提升es-hadoop Bulk效率——续

bonelee 2016-12-02 15:13 阅读:1397 评论:0 推荐:0

spark出现task不能序列化错误的解决方法 org.apache.spark.SparkException: Task not serializable

bonelee 2016-12-01 08:45 阅读:12605 评论:0 推荐:0

自定义Spark Partitioner提升es-hadoop Bulk效率

bonelee 2016-11-12 18:06 阅读:1306 评论:0 推荐:0