2019年2月17日
海量数据处理方法整理记录
摘要： 随着现在数据量的不断增加，很多大数量的问题随之而来，就得需要我们想办法解决，我找了一些问题并首先思考，然后找到方法，在这里记录一下，未来有需要的同学可以拿走去用。 1. 在海量日志数据里，提取某天访问量最多的IP。 一般处理海量的思路都是分治处理，就是现将数据进行拆分，然后进行处理，排序等。这个例子 阅读全文
posted @ 2019-02-17 11:41 黄青石 阅读(1722) 评论(0) 推荐(1) 编辑