水下功夫做透，水上才能顺风顺水。
2017年3月14日
大数据算法
摘要： 1.海量日志数据，提取出某日访问百度次数最多的那个IP 首先是这一天，并且是访问百度的日志中的IP取出来，逐个写入到一个大文件中。注意到ip是32位的，最多有个2^32个ip。同样可以采用映射的方法，比如模1000，把整个大文件映射为1000个小文件，在找出每个小文件中出现频率最大的ip（可以采用h 阅读全文
posted @ 2017-03-14 17:59 北方寒士 阅读(261) 评论(0) 推荐(0)