2019年6月29日
pyspark之sparkML机器学习常见问题之一：removing nulls from dataset or using handleInvalid = "keep" or "skip".
摘要： 使用python语言开发sparkML机器学习程序，遇到如异常： Caused by: org.apache.spark.SparkException: Encountered null while assembling a row with handleInvalid = "keep". Cons 阅读全文
posted @ 2019-06-29 13:06 毛豆哥ABC 阅读(3116) 评论(0) 推荐(0)
spark开发常见问题之一：java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.
摘要： 最近在学习研究pyspark机器学习算法，执行代码出现以下异常： 19/06/29 10:08:26 ERROR Shell: Failed to locate the winutils binary in the hadoop binary pathjava.io.IOException: Cou 阅读全文
posted @ 2019-06-29 12:10 毛豆哥ABC 阅读(9256) 评论(0) 推荐(0)