2022年1月30日
hadoop基准测试
摘要： 测试：向HDFS写入10个128M的文件 使用命令 $ hadoop jar /opt/hadoop-3.2.2/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-3.2.2-tests.jar TestDFSIO -write -nr 阅读全文
posted @ 2022-01-30 18:22 Gazikel 阅读(67) 评论(0) 推荐(0)
hadoop配置LZO压缩
摘要： 准备 在github中下载hadoop-lzo-master.zip github地址 将 hadoop-lzo-master.zip 压缩包解压，使用maven编译为jar包。 上传 通过工具上传到linux目录下。 将这个jar包放在 hadoop目录下的 share/hadoop/common 阅读全文
posted @ 2022-01-30 18:07 Gazikel 阅读(61) 评论(0) 推荐(0)