2017 年 12月随笔档案 - 红与黑hyh

CentOS 6.9安装Python2.7.13

摘要：查看当前系统中的 Python 版本返回 Python 2.6.6 为正常。检查 CentOS 版本返回 CentOS release 6.9 (Final) 为正常。安装所有的开发工具包安装其它的必需包下载、编译和安装 Python 2.7.13 默认 Python 2.7.13 会安阅读全文

posted @ 2017-12-31 11:06 红与黑hyh 阅读(175) 评论(0) 推荐(0)

linux(ubuntu)下安装phantomjs

摘要：1.安装phantomjs ubuntu下sudo apt-get install phantomjs下载的不能用 —-下载程序文件到官网下载 1.安装phantomjs —-下载程序文件 wget https://bitbucket.org/ariya/phantomjs/downloads/p 阅读全文

posted @ 2017-12-29 21:26 红与黑hyh 阅读(185) 评论(0) 推荐(0)

Linux下python2.7安装pip

摘要：首先下载并安装setuptools：再到python官网下载pip安装包，解压到某个位置，我这里下载的是8.0.0版本，然后就可以安装了：阅读全文

posted @ 2017-12-29 21:22 红与黑hyh 阅读(1718) 评论(0) 推荐(0)

Linux 如何测试 IO 性能（磁盘读写速度）

摘要：这几天做MySQL性能测试，偌大一个公司，找几台性能测试机器都很纠结，终于协调到两台，IO的性能如何还不知道。数据库属于IO密集型的应用，所以还是先评估下Server的IO性能，看看是否能和线上的机器匹配上。之前一直知道用dd（device to device）命令可以简单测试磁盘的IO读写速度，但阅读全文

posted @ 2017-12-20 16:10 红与黑hyh 阅读(249) 评论(0) 推荐(0)

hadoop HA分布式集群搭建

摘要：概述 hadoop2中NameNode可以有多个（目前只支持2个）。每一个都有相同的职能。一个是active状态的，一个是standby状态的。当集群运行时，只有active状态的NameNode是正常工作的，standby状态的NameNode是处于待命状态的，时刻同步active状态NameNo 阅读全文

posted @ 2017-12-14 20:29 红与黑hyh 阅读(259) 评论(0) 推荐(0)

搭建HBase完全分布式集群

摘要：搭建完全分布式集群 HBase集群建立在hadoop集群基础之上，所以在搭建HBase集群之前需要把Hadoop集群搭建起来，并且要考虑二者的兼容性.现在就以5台机器为例，搭建一个简单的集群. 软件版本：hadoop-2.8.0,hbase-1.3.0,zookeeper-3.4.10 5台机器IP 阅读全文

posted @ 2017-12-14 20:28 红与黑hyh 阅读(134) 评论(0) 推荐(0)

zookeeper安装

摘要：1. Zookeeper服务集群规模不小于三个节点，要求各服务之间系统时间要保持一致。 2. 在m1的usr/local目录下，解压缩zookeeper（执行命令tar –zvxf zookeeper.tar.gz） 3. 设置环境变量打开/etc/profile文件！内容如下： [html] v 阅读全文

posted @ 2017-12-14 17:41 红与黑hyh 阅读(283) 评论(0) 推荐(0)

scp命令拷贝

摘要：文件拷贝，将172.16.1.2中的文件拷贝到本机中文件夹拷贝，将172.16.1.2中的文件夹others 拷贝到本机 music目录下阅读全文

posted @ 2017-12-14 16:58 红与黑hyh 阅读(150) 评论(0) 推荐(0)

linux 服务器之间配置免密登录

摘要：客户机：172.16.1.2 远程机：172.16.1.3 1、远程机 a、允许root用户通过22端口登录 vi /etc/ssh/sshd_config PORT 22 PermitRootLogin yes b、免去首次访问远程机安全提示（YES/NO） vi /etc/ssh/ssh_con 阅读全文

posted @ 2017-12-14 16:45 红与黑hyh 阅读(221) 评论(0) 推荐(0)

大数据学习系列之一 ----- Hadoop环境搭建(单机)

摘要：一、环境选择 1，服务器选择阿里云服务器:入门型(按量付费)操作系统:linux CentOS 6.8Cpu：1核内存：1G硬盘:40Gip:39.108.77.250 2，配置选择 JDK:1.8 （jdk-8u144-linux-x64.tar.gz）Hadoop:2.8.2 (hadoop- 阅读全文

posted @ 2017-12-11 08:38 红与黑hyh 阅读(280) 评论(0) 推荐(0)

hyh123

公告

12 2017 档案