摘要： 1.idea创建项目 2.在idea中配置maven 这里具体过程不过多介绍，具体安装步骤可以参考网上具体资料 3.在idea中搜索Scala插件，然后安装，安装后选择restart重启idea 4.在pom文件中配置依赖 <dependencies> <dependency> <groupId>o 阅读全文

摘要： 导入依赖 <dependencies> <dependency> <groupId>org.scala-lang</groupId> <artifactId>scala-library</artifactId> <version>2.11.12</version> </dependency> <de 阅读全文

摘要： <build> <plugins> <!-- Java Compiler --> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-compiler-plugin</artifactId> <version> 阅读全文

摘要： 1.首先在pom文件中导入包 <dependencies> <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-hdfs --> <dependency> <groupId>org.apache.hadoop</group 阅读全文

摘要： Redis集群 3.0支持 由多个Redis服务器组成的分布式网络服务集群 每一个Redis服务器称为节点Node，节点之间会互相通信。两两相连 Redis集群无中心节点 Redis集群节点复制 Redis集群的每个节点都有两种角色可选：主节点master node、从节点slave node。其中 阅读全文

摘要： hdfs分布式文件系统 ， 将一个大的文件拆分成多个小文件存储在多台服务器中， 文件系统： 目录结构（树状结构） "/" 树根， 目录结构在namenode中维护 1、创建目录 mkdir mkdir ： 创建目录 /data ; 路径 ， 需要从 ”/“ 开始 hadoop dfs -mkdir 阅读全文

摘要： 1、关闭防火墙 所有节点 service iptables stop chkconfig iptables off 2、设置免密钥 在master中生成密钥文件 ssh-keygen -t rsa 一直回车 将密钥文件同步到所有节点 ssh-copy-id master ssh-copy-id no 阅读全文

摘要： 1、创建安装目录 在master ,node1 ,node2中分别创建 mkdir /usr/local/soft/redis-cluster 2、将redis 复制到redis-cluster 目录下修改名字为7000 cp -r /usr/local/soft/redis /usr/local/ 阅读全文

摘要： 主从复制 Replication 一个Redis服务可以有多个该服务的复制品，这个Redis服务称为Master，其他复制品称为Slaves 只要网络连接正常，Master会一直将自己的数据更新同步给Slaves，保持主从同步 只有Master可以执行写命令，Slaves只能执行读命令 主从复制 R 阅读全文

摘要： 1、将redis文件复制到其它节点 scp -r redis node1:pwd 2、在node1中启动从服务器 cd /usr/local/soft/redis/bin ./redis-server --port 6380 --slaveof master 6379 ./redis-cli -p 阅读全文