2022年10月24日
hadoop
摘要： 需求 有一个非常大的文本文件 里面有很多行,只有两行一样 他们出现在未知的位置 需要查找到他们 单机 而且可用内存很好 也就几十兆 1 假设文件是 1TB 无法用内存全量装取 2 假设IO 速度是500MB每秒 那么我们可以得出 内存的速度是 磁盘IO的10万倍 1s=1000ms(磁盘) 1ms= 阅读全文
posted @ 2022-10-24 23:40 花心大萝卜li 阅读(74) 评论(0) 推荐(0)