摘要：准备发布自己写的python1. 首先为模块创建一个文件夹mkdir nester2. 在新建文件夹中创建一个名为"setup.py"的文件在这个文件包含有关发布的元数据.编辑这个文件,增加下面代码:from distutils.core import setupsetup( name = 'nes... 阅读全文
centos6.4 下安装numpy、scipy、matplotlib
2014-08-23 14:27 by luxr123, 3616 阅读, 0 推荐, 收藏, 编辑
摘要：各个安装包版本：scipy-0.11.0numpy-1.6.2nose-1.2.1lapack-3.4.2##atlas-3.10.0 (http://pkgs.fedoraproject.org/repo/pkgs/atlas/)依赖关系：scipy的安装需要依赖于numpy、lapack、atl... 阅读全文
tfs (二) 配置dataServer、分区、挂载数据盘
2014-08-23 14:18 by luxr123, 555 阅读, 0 推荐, 收藏, 编辑
摘要：目前的情况，tfs安装在/usr/local/tfs/在conf目录下共有6个配置文件(若安装后没有的，请从源码中conf目录下拷贝)： ns.conf、ads.conf、ds.conf、rc.conf、meta.conf和rs.conf其中ns.conf用于配置nameserver，ds.conf... 阅读全文
centos6.4 gcc降级至4.1.2过程
2014-08-23 14:16 by luxr123, 5915 阅读, 0 推荐, 收藏, 编辑
摘要：安装tfs,需要gcc-4.1.2版本的，我的centos6.4 是4.7版本它编译不了，很奇怪。下面是gcc-4.1.2的安装。源码下载：ftp://ftp.gnu.org/gnu/gcc/gcc-4.1.2/解包：tar -xjf gcc-4.1.2.tar.bz2进入目录：cd gcc-4.1... 阅读全文
在python3下使用peewee
2014-08-23 14:14 by luxr123, 956 阅读, 0 推荐, 收藏, 编辑
摘要：在python3下使用peewee-2.1.4做ORM。连接MySQL数据库，提示需要MySQLdb模块，发现MySQLdb模块不支持python3，各种折腾、google不得其法。然后又试着使用MySQL官方forPython驱动Connector/Python需要对qeewee代码改动改动的渐入... 阅读全文
[HBase]ERROR: Region is not online
2014-08-23 14:13 by luxr123, 764 阅读, 0 推荐, 收藏, 编辑
摘要：重启HBase后，进入hbase shell 进行 scan 、get 、create等操作均报错：ERROR: org.apache.hadoop.hbase.NotServingRegionException: org.apache.hadoop.hbase.NotServingRegionEx... 阅读全文
Hadoop2.2.0+hive使用LZO压缩那些事
2014-08-23 14:12 by luxr123, 1873 阅读, 1 推荐, 收藏, 编辑
摘要：环境：Centos6.4 64位Hadoop2.2.0Sun JDK1.7.0_45hive-0.12.0准备工作：yum -y install lzo-devel zlib-devel gcc autoconf automake libtool开始了哦！（1）安装LZOwget http://ww... 阅读全文
hadoop 点点滴滴(三)
2014-08-23 14:11 by luxr123, 1783 阅读, 0 推荐, 收藏, 编辑
摘要：AttemptID:attempt_1390962167768_0001_m_000026_0 Timed out after 600 secs14/01/29 10:56:54 INFO mapreduce.Job: map 13% reduce 0%14/01/29 10:57:28 INFO ... 阅读全文
hadoop 点点滴滴(二)
2014-08-23 14:10 by luxr123, 839 阅读, 0 推荐, 收藏, 编辑
摘要：hadoop2.0 yarn 内存溢出问题解决异常提示：Container [pid=20170,containerID=container_1390877171119_0002_01_000005] is running beyond virtual memory limits. Current ... 阅读全文
Hadoop实战-中高级部分 之 Hadoop作业调优参数调整及原理
2014-08-23 14:09 by luxr123, 217 阅读, 0 推荐, 收藏, 编辑
摘要：第一部分：core-site.xml•core-site.xml为Hadoop的核心属性文件，参数为Hadoop的核心功能，独立于HDFS与MapReduce。参数列表•fs.default.name•默认值 file:///•说明：设置Hadoop namenode的hostname及port，预... 阅读全文