博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

12 2017 档案

摘要:查看当前系统中的 Python 版本 返回 Python 2.6.6 为正常。 检查 CentOS 版本 返回 CentOS release 6.9 (Final) 为正常。 安装所有的开发工具包 安装其它的必需包 下载、编译和安装 Python 2.7.13 默认 Python 2.7.13 会安 阅读全文

posted @ 2017-12-31 11:06 红与黑hyh 阅读(175) 评论(0) 推荐(0)

摘要:1.安装phantomjs ubuntu下sudo apt-get install phantomjs下载的不能用 —-下载程序文件 到官网下载 1.安装phantomjs —-下载程序文件 wget https://bitbucket.org/ariya/phantomjs/downloads/p 阅读全文

posted @ 2017-12-29 21:26 红与黑hyh 阅读(185) 评论(0) 推荐(0)

摘要:首先下载并安装setuptools: 再到python官网下载pip安装包,解压到某个位置,我这里下载的是8.0.0版本,然后就可以安装了: 阅读全文

posted @ 2017-12-29 21:22 红与黑hyh 阅读(1718) 评论(0) 推荐(0)

摘要:这几天做MySQL性能测试,偌大一个公司,找几台性能测试机器都很纠结,终于协调到两台,IO的性能如何还不知道。数据库属于IO密集型的应用,所以还是先评估下Server的IO性能,看看是否能和线上的机器匹配上。之前一直知道用dd(device to device)命令可以简单测试磁盘的IO读写速度,但 阅读全文

posted @ 2017-12-20 16:10 红与黑hyh 阅读(249) 评论(0) 推荐(0)

摘要:概述 hadoop2中NameNode可以有多个(目前只支持2个)。每一个都有相同的职能。一个是active状态的,一个是standby状态的。当集群运行时,只有active状态的NameNode是正常工作的,standby状态的NameNode是处于待命状态的,时刻同步active状态NameNo 阅读全文

posted @ 2017-12-14 20:29 红与黑hyh 阅读(259) 评论(0) 推荐(0)

摘要:搭建完全分布式集群 HBase集群建立在hadoop集群基础之上,所以在搭建HBase集群之前需要把Hadoop集群搭建起来,并且要考虑二者的兼容性.现在就以5台机器为例,搭建一个简单的集群. 软件版本:hadoop-2.8.0,hbase-1.3.0,zookeeper-3.4.10 5台机器IP 阅读全文

posted @ 2017-12-14 20:28 红与黑hyh 阅读(134) 评论(0) 推荐(0)

摘要:1. Zookeeper服务集群规模不小于三个节点,要求各服务之间系统时间要保持一致。 2. 在m1的usr/local目录下,解压缩zookeeper(执行命令tar –zvxf zookeeper.tar.gz) 3. 设置环境变量 打开/etc/profile文件!内容如下: [html] v 阅读全文

posted @ 2017-12-14 17:41 红与黑hyh 阅读(283) 评论(0) 推荐(0)

摘要:文件拷贝,将172.16.1.2中的文件拷贝到本机中 文件夹拷贝,将172.16.1.2中的文件夹others 拷贝到本机 music目录下 阅读全文

posted @ 2017-12-14 16:58 红与黑hyh 阅读(150) 评论(0) 推荐(0)

摘要:客户机:172.16.1.2 远程机:172.16.1.3 1、远程机 a、允许root用户通过22端口登录 vi /etc/ssh/sshd_config PORT 22 PermitRootLogin yes b、免去首次访问远程机安全提示(YES/NO) vi /etc/ssh/ssh_con 阅读全文

posted @ 2017-12-14 16:45 红与黑hyh 阅读(221) 评论(0) 推荐(0)

摘要:一、环境选择 1,服务器选择 阿里云服务器:入门型(按量付费)操作系统:linux CentOS 6.8Cpu:1核内存:1G硬盘:40Gip:39.108.77.250 2,配置选择 JDK:1.8 (jdk-8u144-linux-x64.tar.gz)Hadoop:2.8.2 (hadoop- 阅读全文

posted @ 2017-12-11 08:38 红与黑hyh 阅读(280) 评论(0) 推荐(0)