摘要：
小文件问题是指在HDFS中存在大量的小文件，这会给HDFS带来额外的开销，影响存储和计算的效率。 要是要对小文件进行计算,那么hdfs中每一个小文件都会对应生成一个task,而每一个task的形成和计算都会占用一定的资源和启停时间,影响计算效率nn中要记录dn中存储的数据索引,小文件过多会生产很多记 阅读全文
posted @ 2023-09-03 17:54
sunshin1
阅读(92)
评论(0)
推荐(0)
摘要：
-Dflume.root.logger=info,console 是一个 Java 系统属性，用于配置 Flume 的根日志记录器。 在 Flume 中，-Dflume.root.logger=info,console 的含义是将 Flume 的根日志记录器配置为 info,console。这意味着 阅读全文
posted @ 2023-09-03 17:05
sunshin1
阅读(208)
评论(0)
推荐(0)
摘要：
#找到mysql数据的存放地址 sudo cat /etc/my.cnf #根据得到的路径删除数据 su root cd /var/lib/mysql rm -rf * #查看安装过的mysql相关包 sudo rpm -qa | grep -i -E mysql #卸载 rpm -qa | gre 阅读全文
posted @ 2023-09-03 13:33
sunshin1
阅读(13)
评论(0)
推荐(0)
摘要：
>/dev/null 2>&1是命令行重定向操作，它将标准输出和标准错误输出都重定向到/dev/null设备，也就是一个空设备，即不会将任何输出信息输出到终端或文件。&是后台运行操作，将该程序放在后台运行 阅读全文
posted @ 2023-09-03 09:54
sunshin1
阅读(71)
评论(0)
推荐(0)
浙公网安备 33010602011771号