2012年8月31日
nginx静态处理 优化Linux内核参数
摘要： vi /etc/sysctl.conf02# Add03net.ipv4.tcp_max_syn_backlog = 6553604net.core.netdev_max_backlog = 3276805net.core.somaxconn = 327680607net.core.wmem_default = 838860808net.core.rmem_default = 838860809net.core.rmem_max = 1677721610net.core.wmem_max = 167772161112net.ipv4.tcp_timestamps = 113net.ipv4.t 阅读全文
posted @ 2012-08-31 13:05 ccmaotang 阅读(336) 评论(0) 推荐(0)
20120831 hadoop丢失dn的问题（文件数限制，网络连接限制）
摘要： 机房搬迁，最近集群老是丢失datanode。查找原因：（1）用户进程可打开文件数限制http://www.54chen.com/java-ee/hive-hadoop-blockalreadyexistsexception.html在/etc/security/limits.conf 添加：hado... 阅读全文
posted @ 2012-08-31 12:03 ccmaotang 阅读(315) 评论(0) 推荐(0)
Linux TCP 连接数修改
摘要： Linux TCP 连接数修改一、 文件数限制修改(1) vi /etc/security/limits.conf* soft nofile 10240* hard nofile 10240(2) vi /etc/pam.d/loginsession required /lib/security/pam_limits.so二、 网络端口限制修改(1) vi /etc/rc.d/rc.local/sbin/modprobe ip_conntrack # 加载 ip_contrack 模块# /sbin/sysctl –p #　使 /etc/sysctl.conf 的配置生效，根据实际情况来决定是 阅读全文
posted @ 2012-08-31 11:57 ccmaotang 阅读(3137) 评论(0) 推荐(0)
(转)记hadoop故障一例：BlockAlreadyExistsException
摘要： Posted on 2011-08-15 by 54chenhive版本：0.7.0 hadoop版本：0.20.2在线上跑了一个季度了，基本上没什么问题，今天突然出了问题。在hive执行时留下的蛛丝马迹：Failed with exception org.apache.hadoop.hdfs.server.namenode.NotReplicatedYetException: Not replicated yet:/tmp/hive-root/hive_2011-08-15_00-31-02_332_247809173824307798/-ext-10000/access_bucket-20 阅读全文
posted @ 2012-08-31 10:36 ccmaotang 阅读(972) 评论(0) 推荐(0)