SongHui.Club

随笔分类 -  大数据

大数据相关知识总结
Spark- word Count案例
摘要：1. 新建项目 新建 idea Maven项目工程, 并创建子工程,pom.xml文件中引入spark依赖 pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0 阅读全文
posted @ 2021-07-03 23:15 Mr.SongHui 阅读(156) 评论(0) 推荐(0)
Spark安装（单机版）
摘要：1. 下载安装 官网下载 选择版本和type，这里为 spark-2.4.4-bin-without-hadoop.tgz 1.1 命令下载： 1 cd ~/software 2 wget http://apache.communilink.net/spark/spark-2.4.4/spark-2 阅读全文
posted @ 2020-01-28 14:46 Mr.SongHui 阅读(2865) 评论(0) 推荐(0)
Hive 安装（单机版）
摘要：1. 下载安装 1.1 这里选择安装的是3.1.2，使用下面命令进行下载： 1 # cd ~/software 2 wget http://mirror.bit.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz 1.2 解压重命名 阅读全文
posted @ 2020-01-27 10:16 Mr.SongHui 阅读(2675) 评论(1) 推荐(0)
Hadoop 安装（单机版）
摘要：Hadoop2.9.2的单机版安装教程 阅读全文
posted @ 2020-01-26 15:25 Mr.SongHui 阅读(1781) 评论(0) 推荐(0)