2017年8月16日
jsonp爬取页面
摘要： jsonp http://blog.csdn.net/column/details/jsoup.html 阅读全文
posted @ 2017-08-16 23:30 牵牛花 阅读(1153) 评论(0) 推荐(0)
Hadoop 回收站
摘要： 一、回收站简介： 在HDFS里，删除文件时，不会真正的删除，其实是放入回收站/trash，回收站里的文件可以快速恢复。 可以设置一个时间阀值，当回收站里文件的存放时间超过这个阀值或是回收站被清空时，文件才会被彻底删除，并且释放占用的数据块。 二、实例： Hadoop的回收站trash功能默认是关闭的 阅读全文
posted @ 2017-08-16 19:32 牵牛花 阅读(276) 评论(0) 推荐(0)
Sparkstreaming reduceByKeyAndWindow(_+_, _-_, Duration, Duration) 的源码/原理解析
摘要： Sparkstreaming reduceByKeyAndWindow(_+_, _-_, Duration, Duration) 的源码/原理解析 阅读全文
posted @ 2017-08-16 14:43 牵牛花 阅读(846) 评论(0) 推荐(0)
spark streaming updateStateByKey 用法
摘要： spark streaming updateStateByKey 用法 阅读全文
posted @ 2017-08-16 10:51 牵牛花 阅读(308) 评论(0) 推荐(0)