2019年5月27日
Redis数据库No-SQL的介绍安装和使用
摘要： Redis安装步骤 1.官网下载Redis压缩包http://download.redis.io/releases/redis-5.0.2.tar.gz，然后将下载的redis上传到虚拟机的/usr/local目录下。 2.解压Redis压缩包，使用命令：tar -zxvf redis-5.0.2. 阅读全文
posted @ 2019-05-27 00:30 旧伤 阅读(225) 评论(0) 推荐(0) 编辑
spark与Scala安装过程和步骤及sparkshell命令的使用
摘要： Spark与Scala版本兼容问题： Spark运行在Java 8 +，Python 2.7 + / 3.4 +和R 3.1+上。对于Scala API，Spark 2.4.2使用Scala 2.12。您需要使用兼容的Scala版本（2.12.x）。 请注意，自Spark 2.2.0起，对2.6.5 阅读全文
posted @ 2019-05-27 00:08 旧伤 阅读(1991) 评论(1) 推荐(0) 编辑
2019年5月26日
在eclipse使用map reduce编写word count程序生成jar包并在虚拟机运行的步骤
摘要： 恢复内容开始 1.首先准备一个需要统计的单词文件 word.txt，我们的单词是以空格分开的，统计时按照空格分隔即可 hello hadoop hello yarnhello zookeeperhdfs hadoop select from hadoopselect from yarnmapRedu 阅读全文
posted @ 2019-05-26 23:23 旧伤 阅读(819) 评论(0) 推荐(0) 编辑
2019年5月21日
HBASE的安装过程及运行HBASE程序的需要配置的内容
摘要： HBase安装配置 ①下载压缩包（选择与自己安装的Hadoop版本的兼容版本，见后面附录） 官网下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/ 选择稳定版hbase-1.4.9-bin.tar.gz，在Windows里面下 阅读全文
posted @ 2019-05-21 20:31 旧伤 阅读(1830) 评论(0) 推荐(0) 编辑
MySQL、Hive以及MySQL Connector/J安装过程
摘要： MySQL安装 ①官网下载mysql-server（yum安装） wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm 若wget不可用，下载安装wget：yum -y install wget ②解压rpm - 阅读全文
posted @ 2019-05-21 19:59 旧伤 阅读(2667) 评论(0) 推荐(0) 编辑
安装配置JDK+Eclipse+Maven、Eclipse里新建Maven Project以及HDFS命令和Java API-课堂内容
摘要： 步骤：1.安装JDK→2.安装Eclipse→3.安装Maven→4. Eclipse里配置Maven （下载Windows版本，在Windows里安装使用。） 1.安装配置JDK ①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe：https://www.oracl 阅读全文
posted @ 2019-05-21 19:46 旧伤 阅读(426) 评论(0) 推荐(0) 编辑
Hadoop三种模的安装配置过程
摘要： JDK+Hadoop安装配置、单机模式配置 以下操作在SecureCRT里面完成 1.关闭防火墙 firewall-cmd --state 显示防火墙状态running/not running systemctl stop firewalld 临时关闭防火墙，每次开机重新开启防火墙 systemct 阅读全文
posted @ 2019-05-21 19:28 旧伤 阅读(287) 评论(0) 推荐(0) 编辑