摘要： 大文件切分：fedoraspilt -b 10m sourceFile desPrefix小文件合并：cat sourceFile1 sourceFile2 ....>destFile 阅读全文

摘要： 机器多了自然控制就麻烦了，要用不同的键盘，使用多个鼠标，十分不爽，还好有synergy,帮助我们摆脱这恼人的情形。 简单的说synergy做的就是将各个不同系统的机器通过安装synergy程序，使用client-server模式，来共享一个键盘鼠标。项目是开源的，主页是http://synergy-foss.org/。 下面说明一下使用说明： （1）首先从官网上下载对应系统的安装程序，windows很简单，直接安装就好。我的client使用的fedora 15，下载rpm包，在安装之前，需要安装qt依赖包，使用sudo yum install qt qt-x11 即可。 （2）启... 阅读全文

摘要： 搞python的web框架，通过python安装web.py报错，记录一下错误：File "setup.py", line 6, in ? from web import __version__ File "/home/yanhui.jy/webpy/web.py-0.36/web/__init__.py", line 27, in ? from application import * File "/home/yanhui.jy/webpy/web.py-0.36/web/application.py", line 639 SUFF 阅读全文

摘要： · ’ “ 的区别·即键盘左上角esc键下面。在bash中· ·中间的脚本会进行执行,同样的如$()也会执行内部的语句如line=`wc -l<deploy/master `会执行wc -l <deploy/master并把值赋给line变量。单引号和双引号的区别：单引号不会将引号内部的\"$进行解析。如上面的echo '$line'，结果是$line双引号会将内部的\"$进行解析，上面的echo "$line"结果是文件正确行数。if的String test如下：if [ " 阅读全文

摘要： bash程序书写规范：1、The header2、Global declarations3、Sanity checks4、The main script5、Clean up 阅读全文

摘要： 工作中需要处理将大量的java文件中一个资源文件位置变更，编写一个简单的bash脚本，采用sed替换，但是采用sed 's//' test.java > test.java时候，test.java消失，查了一下，有一下的解决方法，采用tmp文件进行复写。#! /bin/bashwhile read linedo if grep "sessionTimeOut = conf.getInt(\"zookeeper.session.timeout\", 180000);" $line then echo $line match sed & 阅读全文

摘要： 最近在做一些集群管理的简单脚本，其中有一部分是将文件中的机器名读取，并将应用通过scp传输，通过ssh解压部署。#! /bin/bashwhile read IPdoscp adfs-*.tar.gz $IP:~ssh $IP tar -zxf adfs-*.tar.gzdone<machine 一开始写了个简单的脚本，通过machine读取所有机器名，在进行操作。 可是运行以后发现，只有第一次循环成功运行，剩下的都没有运行。 google了一下，是由于bash中while循环调用ssh后会使用subshell，导致后续操作无法进行。 解决方法为在ssh上加参数-n，即可成功运行。... 阅读全文

摘要： 制定学习计划：2-3月 python <<beginning python>> <<pro python>>2-3月 Hadoop 源码分析，找基线版本每晚分析代码 阅读全文

摘要： Hadoop HA是一个非常需要重视的问题。众所周知，Haddop是一个SPOF(single point of failure)系统，存在单点问题。对于7×24生产环境，是具有极大的风险。 目前社区版的做法是有两种保障机制，第一种是可以设置一个NFS的目录，存储fsimage和editlog，存储的是实时数据，这样当namenode挂掉后能够通过fsimage和editlog进行完全恢复。第二种是设置secondary namenode，名称很迷惑，但其作用是对fsimage和editlog进行定期的merge，默认是5分钟，所以获得的数据是过期的，存在数据丢失，但是能够恢复大部分 阅读全文

摘要： 记录一下。fedora手动启动openssh server方法： sudo /etc/init.d/sshd start 需要sudo权限 阅读全文