虚怀若谷

摘要： 当数据量比较大，我们需要更快的完成任务，多个map和reduce进程是唯一的选择。但是如果输入文件是一个的话，map任务只能启动一个。此时bucket table是个很好的选择，通过指定CLUSTERED的字段，将文件通过hash打散成多个小文件。create table sunwg_test11(id int,name string)CLUSTERED BY(id) SORTED BY(name) INTO 32 BUCKETSROW FORMAT DELIMITEDFIELDS TERMINATED BY ‘/t’;需要特别注意的是：clustered by和sorted by不会影响数据 阅读全文

摘要： link：http://wiki.ubuntu.org.cn/Qref/Source首先备份源列表:sudo cp /etc/apt/sources.list /etc/apt/sources.list_backup 编辑源列表：vi /etc/apt/sources.list然后，刷新列表:sudo apt-get updateUbuntu 官方更新服务器（欧洲，此为官方源，国内较慢，但无同步延迟问题，电信、移动/铁通、联通等公网用户可以使用)：deb http://archive.ubuntu.com/ubuntu/ precise main restricted universe mu. 阅读全文

摘要： link：http://www.cnblogs.com/xinzaibing/archive/2012/03/24/2415434.htmlps 显示当前进程ps -l 显示详细信息ps -u 以用户的格式显示相关字段说明F 进程状态标志S 进程状态代码UID 进程执行者IDPPID 父进程标识(parent process ID)PRI 进程执行的优先级(priority)NI 进程执行优先级的nice值,负值表示其优先级较高SZ 进程占用的内存大小WCHAN 进程或系统调用等待时的地址%CPU cpu使用百分比%MEM 内存使用百分比VSZ 占用虚拟内存大小RSS 占用物理内存大小STAR 阅读全文

摘要： 守财奴:不愿承认自己小气，不信任人，害怕丢失钱，不太会享受金钱带来的好处。挥霍金钱的人：有花钱的强迫感，在情绪失落、被人排斥时，以花钱得到满足感，但比较短暂，马上就会有罪孽感。大款：一门心思捞钱，认为钱越多，生活越幸福。追逐便宜货的人：一心一意找便宜货，即使不需要也会有满足感，但不能砍价时，就会很失落。赌徒：以碰运气感到高兴，输钱也难以罢手，因为赢钱会有一种优胜感。 阅读全文

摘要： Can't connect to local MySQL server through socket '/var/run/mysqld/mysqld.socket'mysql无法启动1,查看mysql的错误日志，到/etc/mysql/my.cnf中找到日志的路径log_error=/var/log/mysql;121211 12:32:14 [ERROR] Can't start server: Bind on TCP/IP port: Address already in use121211 12:32:14 [ERROR] Do you already h 阅读全文

摘要： 分类：NoSQL2011-04-04 14:412214人阅读评论(0)收藏举报hadoop-0.20.2 & hbase-0.90.1集群启动错误问题解决：问题如下：org.apache.hadoop.ipc.RPC$VersionMismatch: Protocol org.apache.hadoop.hdfs.protocol.ClientProtocol version mismatch. (client = 42, server = 41) at org.apache.hadoop.ipc.RPC.getProxy(RPC.java:364) at org.apache.ha 阅读全文

摘要： 环境：ubuntu 11.04hadoop-0.20.2hbase-0.90.51）下载hbase解压到每台服务器的/data/soft解压root@master:/data/soft# tar zxvf hbase-0.90.5.tar.gz2）配置hbase前提是安装完成hadoop，默认在namenode上进行1.修改conf/hbase-env.sh，添加jdk支持export JAVA_HOME=/usr/local/jdk export HBASE_MANAGES_ZK=true export HBASE_LOG_DIR=/home/hunter/hbase/logs修改 ：exp 阅读全文

摘要： 1，数据压缩存储的问题，压缩后并行计算的问题（bzip，hive并行计算时不能分割）；2，某个datanode上的一个磁盘满的问题； 阅读全文

摘要： MySQL会出现中文乱码的原因不外乎下列几点：1.server本身设定问题，例如还停留在latin12.table的语系设定问题(包含character与collation)3.客户端程式(例如php)的连线语系设定问题强烈建议使用utf8!!!!utf8可以兼容世界上所有字符!!!!一、避免创建数据库及表出现中文乱码和查看编码方法1、创建数据库的时候：CREATE DATABASE `test`CHARACTER SET 'utf8'COLLATE 'utf8_general_ci';2、建表的时候 CREATE TABLE `database_user` ( 阅读全文

摘要： 你约人吃饭，因为不知道说什么的时候，还能低头夹菜。你约人电影，因为不必说什么，只要静静地看别人的生活和故事。你约人逛街，因为总有些新的产品上市，可以聊一聊试一试。你约人唱歌，因为不用背歌词，只用对着屏幕讲出来就好。喜欢去超市，直接拿东西刷卡就好，不用和人讨价还价。喜欢去咖啡馆，做自己的事，和周围人无关。喜欢去健身房，跑步或者练器械，见到有人走近就默默走开。喜欢去书店，这本那本翻一翻看一看，回家再从网上买回来。这城市足够大，大到可以容忍你的一切怪癖和习惯。或者不是容忍，而是无视。人们都忙碌于自己的生活，把冷漠说成对隐私的尊重。挺好的。没事吧。那就好。还行。大家都这么说。挺好的。没事啊。还好。还可 阅读全文