随笔分类 -  运维经验积累

摘要：hadoop节点摘除操作：1、确定exclude文件的位置。 dfs.hosts.exclude /data/hadoop/conf/excludes Names a file that contains a list of hosts that are not permitted to connect to the namenode. The full pathname of the file must be specified. If the value is empty, no hosts are excluded.确定了exclude的文件... 阅读全文

摘要：有一次发现自己输入的url中含有中文的时候，他会转化为%XXXX的格式。于是想怎么把他给转换回去，于是使用了urllib库#-*-coding:utf8 -*-import urlliburl = " www.baidu.com%253a80%25e6%258f%25a1%25e6%2589%258b%25e6%2588%2590%25e5%258a%259f%253b"_de_code= urllib.unquote(url)de_code = urllib.unquote(_de_code).decode("utf8")print de_code输出 阅读全文

摘要：关于thrift的介绍：http://www.ibm.com/developerworks/cn/java/j-lo-apachethrift/Apache Thrift 是 Facebook 实现的一种高效的、支持多种编程语言的远程服务调用的框架。它采用接口描述语言定义并创建服务，支持可扩展的跨语言服务开发，所包含的代码生成引擎可以在多种语言中，如 C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, Smalltalk 等创建高效的、无缝的服务，其传输数据采用二进制格式，相对 XML 和 JSON 体积更小，对于高并 阅读全文

摘要：zookeeper是一个协同工作集群。他的特性是只要保留1/2的集群数目就能保证整个集群的可用性。例如101台，可承受50台同时挂掉的风险，所以如果能跨机房或者跨地域进行部署，那么基本上可以保证整体的可用性。1、安装jdk，输入java -version有正常返回，就是安装了jdk. 如未安装则下载一个安装就可以了。建议1.6+版本2、下载http://mirror.bjtu.edu.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz zookeeper的包。3、保证所有节点的所有路径一直即可。本次安装的路径为/data/wo. 阅读全文

摘要：线上服务器磁盘资源不够用了，有没有，苦恼！！！把磁盘相互挂载，，不好用有土鳖。。让那帮死开发瞧不起。还好你来了。。。LVM逻辑卷管理：lvm的构成如下图PV:是物理的磁盘分区VG:LVM中的物理的磁盘分区，也就是PV，必须加入VG，可以将VG理解为一个仓库或者是几个大的硬盘。LV：也就是从VG中划分的逻辑分区线上的资源环境是这样的：[admin@56_74 ~]# df -ThFilesystem Type Size Used Avail Use% Mounted on/dev/sda1 ext3 9.9G 1.6G 7.8G 17% //dev/sda3 ... 阅读全文