12 2021 档案
摘要:在Ubuntu中实现运行。 准备txt文件 编写py文件 python3运行py文件分析txt文件。 2.用MapReduce实现词频统计 2.1编写Map函数 编写mapper.py 授予可运行权限 本地测试mapper.py 2.2编写Reduce函数 编写reducer.py 授予可运行权限
阅读全文
摘要:一.安装Hive 下载解压重命名权限 (1)解压安装 (2)重命名权限 2.配置环境变量 3.修改Hive配置文件 4.配置mysql驱动 1.下载合适版本的mysql jar包,拷贝到/usr/local/hive/lib目录下 2.在mysql新建hive数据库 3.配置mysql允许hive接
阅读全文
摘要:. 安装Hive 下载解压重命名权限 配置环境变量 $HIVE_HOME 修改Hive配置文件 gedit 配置mysql驱动 下载合适版本的mysql jar包,拷贝到/usr/local/hive/lib目录下 ls 在mysql新建hive数据库 show databases; 配置mysql
阅读全文
摘要:1.理解HBase表模型及四维坐标:行键、列族、列限定符和时间戳。 2.启动HDFS,启动HBase,进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan 8.多版本实验:修改列族版本数
阅读全文
摘要:1.理解HBase表模型及四维坐标:行键、列族、列限定符和时间戳。 2.启动HDFS,启动HBase,进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan 8.多版本实验:修改列族版本数
阅读全文

浙公网安备 33010602011771号