2015年7月20日
(转)第一部分、十道海量数据处理面试题
摘要： 第一部分、十道海量数据处理面试题 1、海量日志数据，提取出某日访问百度次数最多的那个IP。 首先是这一天，并且是访问百度的日志中的IP取出来，逐个写入到一个大文件中。注意到IP是32位的，最多有个2^32个IP。同样可以采用映射的方法， 比如模1000，把整个大文件映射为1000个小文件，再找出每个 阅读全文
posted @ 2015-07-20 10:28 CS408 阅读(294) 评论(0) 推荐(0)