摘要：核心提示：swagger在很长一段时间不访问之后，再访问会出现下面这个（猜测是session过期），如果不做任何处理，这个页面会频繁访问：http://xxx.xxx.com/null/swagger-resources/configuration/ui，因为是死循环，访问量能把服务撑爆了。可以看到 阅读全文

摘要：https://www.cnblogs.com/xiaolongs/p/14854158.html 04 - RDD编程练习 原因 ：晚上学习python错过了提交时间 https://www.cnblogs.com/xiaolongs/p/14854164.html 05 - RDD练习：词频统计 阅读全文

摘要：07 从RDD创建DataFrame 1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() 2. Spark与Pandas中DataFrame对比 Pandas Spark 工作方式 单机s 阅读全文

摘要：RDD练习：词频统计 一、词频统计： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words flatmap() 3.全部转换为小写 lower() 4.去掉长度小于3的单词 filter() 5.去掉停用词 6.转换成键值对 map() 7.统计词频 reduceByKe 阅读全文

摘要：RDD编程练习 一、filter,map,flatmap练习： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words 3.全部转换为小写 4.去掉长度小于3的单词 5.去掉停用词 6.练习一的生成单词键值对 最后相关文件已经保存。 阅读全文