12 2021 档案

摘要:在Ubuntu中实现运行。 准备txt文件 编写py文件 python3运行py文件分析txt文件。 2.用MapReduce实现词频统计 2.1编写Map函数 编写mapper.py 授予可运行权限 本地测试mapper.py 2.2编写Reduce函数 编写reducer.py 授予可运行权限 阅读全文
posted @ 2021-12-24 10:41 Future8 阅读(80) 评论(0) 推荐(0)
摘要:一.安装Hive 下载解压重命名权限 (1)解压安装 (2)重命名权限 2.配置环境变量 3.修改Hive配置文件 4.配置mysql驱动 1.下载合适版本的mysql jar包,拷贝到/usr/local/hive/lib目录下 2.在mysql新建hive数据库 3.配置mysql允许hive接 阅读全文
posted @ 2021-12-24 10:37 Future8 阅读(46) 评论(0) 推荐(0)
摘要:. 安装Hive 下载解压重命名权限 配置环境变量 $HIVE_HOME 修改Hive配置文件 gedit 配置mysql驱动 下载合适版本的mysql jar包,拷贝到/usr/local/hive/lib目录下 ls 在mysql新建hive数据库 show databases; 配置mysql 阅读全文
posted @ 2021-12-24 10:31 Future8 阅读(34) 评论(0) 推荐(0)
摘要:1.理解HBase表模型及四维坐标:行键、列族、列限定符和时间戳。 2.启动HDFS,启动HBase,进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan 8.多版本实验:修改列族版本数 阅读全文
posted @ 2021-12-21 14:07 Future8 阅读(38) 评论(0) 推荐(0)
摘要:1.理解HBase表模型及四维坐标:行键、列族、列限定符和时间戳。 2.启动HDFS,启动HBase,进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan 8.多版本实验:修改列族版本数 阅读全文
posted @ 2021-12-21 14:06 Future8 阅读(24) 评论(0) 推荐(0)