摘要: 1. 把准备好的安装包下载到共享文件夹 2.虚拟机内绑定共享文件夹,并解压出来 3.改名并授权 4.安装好后,修改Spark的配置文件spark-env.sh 在第一行添加: export SPARK_DIST_CLASSPATH=$(/usr/local/hadoop/bin/hadoop cla 阅读全文
posted @ 2022-03-09 12:36 雪糕sama 阅读(4) 评论(0) 推荐(0) 编辑
摘要: 一、AC配置WLAN 二、AC配置wlan的业务参数: 1、安全模板 <AC6005>sys [AC6005]wlan [AC6005-wlan-view]security-profile name sec-hzk [AC6005-wlan-sec-prof-sec-hzk]security wpa 阅读全文
posted @ 2021-12-22 17:19 雪糕sama 阅读(281) 评论(0) 推荐(0) 编辑
摘要: 设置自己的共享文件夹并挂载 咱就是说,以后虚拟机的安装包可以在主机下载到这个文件夹里 .安装虚拟机 下载 01 VirtualBox-6.1.16-140961-Win.exe,并安装完成。 2.安装Linux操作系统 下载02 ubuntukylin-16.04-desktop-amd64.iso 阅读全文
posted @ 2021-12-20 18:47 雪糕sama 阅读(19) 评论(0) 推荐(0) 编辑
摘要: 一、安装Hive 1. 下载解压重命名权限 (解压) (重命名+修改权限) 2.配置环境变量 $HIVE_HOME (添加红框中变量) 3.修改Hive配置文件( gedit hive-site.xml) 4.配置mysql驱动(下载mysql jdbc包到/usr/local/hive/lib下) 阅读全文
posted @ 2021-12-07 22:57 雪糕sama 阅读(9) 评论(0) 推荐(0) 编辑
摘要: 可视化 portainer (先用这个) docker run -d -p 8088:9000 \--restart=always -v /var/run/docker.sock:/var/run/docker.sock --privileged=true portainer/portainer R 阅读全文
posted @ 2021-12-01 18:46 雪糕sama 阅读(38) 评论(0) 推荐(0) 编辑
摘要: WordCount程序任务: 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数(频数), 并按照单词字母顺序排序, 每个单词和其频数占一行,单词和频数之间有间隔 1.用你最熟悉的编程环境,编写非分布式的词频统计程序。 读文件 分词(text.split列表 阅读全文
posted @ 2021-11-27 01:12 雪糕sama 阅读(12) 评论(0) 推荐(0) 编辑
摘要: 1.理解HBase表模型及四维坐标:行键、列族、列限定符和时间戳。 respect 2.启动HDFS,启动HBase,进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create(smile,包含3个列族‘s1','s2','s3') 5.查看表详情desc 6 阅读全文
posted @ 2021-11-09 16:37 雪糕sama 阅读(8) 评论(0) 推荐(0) 编辑
摘要: 1.下载压缩文件 2.解压 3.修改文件夹名 4.修改文件夹权限 5.配置环境变量 (运行) 6.伪分布式配置文件(2个) 7.启动HDFS,启动Hbase 8.进入shell界面 9.停止Hbase,停止HDFS运行 阅读全文
posted @ 2021-11-02 16:38 雪糕sama 阅读(8) 评论(0) 推荐(0) 编辑
摘要: 一、在Ubuntu系统中安装和配置Eclipse 解压eclipse: 接着进入,期间可能出现不了eclipse的情况,具体表现为报错或无响应,原因大概是之前按教程安装步骤所分配的内存过小。 我的解决办法: 进去后就开一个java工程包啦 然后添加了工程所需的jar包: 二、利用hadoop 的ja 阅读全文
posted @ 2021-11-01 21:05 雪糕sama 阅读(12) 评论(0) 推荐(0) 编辑
摘要: 1.用图与自己的话,简要描述Hadoop起源与发展阶段。 (1)Hadoop最早起源于lucene下的Nutch。Nutch的设计目标是构建一个大型的全网搜索引擎,包括网页抓取、索引、查询等功能,但随着抓取网页数量的增加,遇到了严重的可扩展性问题——如何解决数十亿网页的存储和索引问题。 (2)200 阅读全文
posted @ 2021-10-24 18:26 雪糕sama 阅读(12) 评论(0) 推荐(0) 编辑