摘要： 首先，介绍一下Redis数据库。Redis是一种面向“键/值”对数据类型的内存数据库，可以满足我们对海量数据的读写需求。 1）redis的键只能是字符串； 2）redis的值支持多种数据类型： a：字符串 string b：哈希 hash c：字符串列表 list d：字符串集合 set 不重复，无 阅读全文

摘要： 1. 部署ganglia 服务 ganglia 涉及到的组件: 数据监测节点（gmond）：这个部件装在需要监测的节点上，用于收集本节点的运行情况，并将这些统计信息传送到gmetad，Ubuntu系统中的ganglia-monitor包可以安装； 数据收集节点（gmetad、gweb）：这个部件用于 阅读全文

摘要： 1、准备三台虚拟机，系统是centos 7，IP分别是： 192.168.254.110 master 192.168.254.111 slave1 192.168.254.112 slave2 2、如果没有httpd服务的话 需要在master上安装一个httpd： 1）　yum install 阅读全文

摘要： 这几天都在搞大数据这一块，由于以前自己在弄hadoop等安装的时候特别的费劲，于是乎找到了广大程序员的福音——cloudera manager，但是第一步安装好了以后无法启动，再三思考+百度发现： 通常有以下可能： service cloudera-scm-server-db 是否启动 servic 阅读全文

摘要： 1、首先，我们需要在oracle官网下载virtual Box的centos7版本： 下载地址为：http://download.virtualbox.org/virtualbox/5.0.12/VirtualBox-5.0-5.0.12_104815_el7-1.x86_64.rpm2、使用rp... 阅读全文

摘要： 这些天在公司里面做文本分析的任务，我跟着玻哥一起做，先研究了算法的可行度，最后决定使用Google的Word2Vector和LDA算法来对文本进行分析。之前因为看过一些Spark的东西，所以准备瞄准MLlib，直接使用其机器学习库来进行算法的测试。 但是发现一个非常重大的问题——因为Spark默认是 阅读全文

摘要： 1. 安装配置zookeeper Storm使用Zookeeper协调集群，由于Zookeeper并不用于消息传递，所以Storm给Zookeeper带来的压力相当低。对于Zookeeper集群的话，官方推荐的最小节点数为3个。 在Zookeeper集群的每台机器上完成以下安装部署步骤: 1、下载z 阅读全文

摘要： 1. 版本信息 eclipse windows 64 bit hadoop 2.5.2 64 bit hadoop eclipse-plug 2.5.2 2. 下载hadoop-2.5.2.tar.gz http://mirror.bit.edu.cn/apache/hadoop/common/ha 阅读全文

摘要： 今天闲来无事，于是把HDFS的基本操作用java写出简化程序出来给大家一些小小帮助！ 阅读全文

摘要： 1、删除目录下制定大小的文件 find . -name "*" -type f -size #文件的大小#c | xargs -n 1 rm -f 阅读全文