毛豆哥ABC

[置顶] spark开发常见问题之一：java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

摘要：最近在学习研究pyspark机器学习算法，执行代码出现以下异常： 19/06/29 10:08:26 ERROR Shell: Failed to locate the winutils binary in the hadoop binary pathjava.io.IOException: Cou 阅读全文

posted @ 2019-06-29 12:10 毛豆哥ABC 阅读(9256) 评论(0) 推荐(0)

[置顶] 记录学习点滴

摘要：终于开通了博客，甚是开心，曾经都是写笔记之类，或者查了知识点解决了问题感觉记住了就ok；事实上并不是这样，有句话说:“好记性不如烂笔头”，真的是这样。写下来的东西随时翻看，而且不用去查找其他记录，更快更熟悉了解自己记录的知识点，同时还能成为其他同仁的参考。故决定还是写下博客记录自己使用过的技术，遇到阅读全文

posted @ 2018-10-18 15:19 毛豆哥ABC 阅读(168) 评论(0) 推荐(0)

2019年6月29日

pyspark之sparkML机器学习常见问题之一：removing nulls from dataset or using handleInvalid = "keep" or "skip".

摘要：使用python语言开发sparkML机器学习程序，遇到如异常： Caused by: org.apache.spark.SparkException: Encountered null while assembling a row with handleInvalid = "keep". Cons 阅读全文

posted @ 2019-06-29 13:06 毛豆哥ABC 阅读(3116) 评论(0) 推荐(0)

2019年6月27日

圈子自我介绍

摘要：简单直接：曾经JAVA开发，现在大数据相关工作，园区主要分享ABC相关的学习、技术、心得等内容。 A=AI=人工智能 B=Bigdata=大数据 C=Cloud=云计算收工！阅读全文

posted @ 2019-06-27 15:19 毛豆哥ABC 阅读(290) 评论(0) 推荐(0)

公告