摘要：
转自：https://www.cnblogs.com/zwl715/p/3964963.html 缓存（cached）是把读取过的数据保存起来，重新读取时若命中（找到需要的数据）就不要去读硬盘了，若没有命中就读硬盘。其中的数据会根据读取频率进行组织，把最频繁读取的内容放在最容易找到的位置，把不再读的 阅读全文
posted @ 2018-06-12 16:22 Brown羊羊 阅读(203) 评论(0) 推荐(0)
摘要：
1.先了解一下LVM LVM是 Logical Volume Manager，逻辑的概念，Linux用户安装Linux操作系统时遇到的一个常见的难以决定的问题就是如何正确地评估各分区大小，以分配合适的硬盘空间。普通的磁盘分区管理方式在逻辑分区划分好之后就无法改变其大小，当一个逻辑分区存放不下某个文件 阅读全文
posted @ 2018-06-11 11:51 Brown羊羊 阅读(1621) 评论(0) 推荐(0)
摘要：
（1）报错：unregister_netdevice: waiting for vethfa4b4ee to become free. Usage count = 1 踩了个内核的坑 docker 1.9.1 kernel 3.10.327（redhat7） 先记录下，还没有找到哪个内核版本修复了这 阅读全文
posted @ 2018-06-08 10:15 Brown羊羊 阅读(1142) 评论(0) 推荐(0)
摘要：
1.Heartbeat lost for the host ambari-agent [root@oc-data-141 ~]# ambari-agent status —查看客户端状态 [root@oc-data-141 ~]# tailf /var/log/ambari-agent/ambari 阅读全文
posted @ 2018-06-06 16:31 Brown羊羊 阅读(931) 评论(0) 推荐(0)
摘要：
1.core-site.xml <property> <name>fs.trash.interval</name> <value>360</value> </property> hadoop默认垃圾回收保存时间，分钟 2.mapreduce.input.linerecordreader.line.m 阅读全文
posted @ 2018-06-06 16:24 Brown羊羊 阅读(278) 评论(0) 推荐(0)
摘要：
1.启动hadoop 进入HADOOP_HOME sh bin/start-all.sh 2.关闭hadoop 进入HADOOP_HOME sh bin/stop-all.sh 3.查看/tmp目录下文件 hadoop fs -ls /tmp hadoop fs -lsr /tmp —递归查看包括子 阅读全文
posted @ 2018-06-06 16:19 Brown羊羊 阅读(134) 评论(0) 推荐(0)
摘要：
1.Hive任务内存溢出 hive执行select day_id,count(1) from ti_94014_signal_physics_yyyymmddhh group by day_id; Mapreduce报错 报错： For more detailed output, check app 阅读全文
posted @ 2018-06-06 16:17 Brown羊羊 阅读(598) 评论(0) 推荐(0)
摘要：
klist -ekt hdfs.service.keytab 这个命令在两个系统中执行下，就能看出哪个不一样 有两种方法解决 删除指定用户不一致的部分 [root@admin temp]# ktutil ktutil: rkt /root/temp/hdfs.service.keytab ktuti 阅读全文
posted @ 2018-06-06 16:14 Brown羊羊 阅读(168) 评论(0) 推荐(0)
摘要：
在粗粒度分布式锁，分布式选主，主备高可用切换等不需要高 TPS 支持的场景下有不可替代的作用，而这些需求往往多集中在大数据、离线任务等相关的业务领域，因为大数据领域，讲究分割数据集，并且大部分时间分任务多进程 / 线程并行处理这些数据集，但是总是有一些点上需要将这些任务和进程统一协调，这时候就是 Z 阅读全文
posted @ 2018-06-06 16:12 Brown羊羊 阅读(89) 评论(0) 推荐(0)
浙公网安备 33010602011771号