wjhfree

摘要： 由于没有检验运行，我以为之前配置的hbase没有问题，本来打算今天初步使用一下hbase，结果在执行hbase的shell命令时，还是出现了报错。 经过检查日志，最终检出并解决了。 主要是两个问题 1.zoo.cfg文件中编号要从1开始 2.其次是hbase的sl4f文件与hadoop冲突了，将ha 阅读全文

摘要： 继续上次的配置，在得知要安装zookeeper后，我对其进行了了解，我发现他分为单机、伪集群、集群三种部署方式。 由于hadoop是集群部署了，有三台服务器，所以我打算也配置集群 但是我之前的hbase是单机部署，所以这次要修改一下之前的配置文件 同样我也是找了对应教程，一步步进行配置 在配置过程中 阅读全文

摘要： 今天上课课堂测试要求实现对hbase数据库的增删改查等操作，经了解后使用hbase需要在linux系统下，并配置hadoop等。 由于我已经安装好虚拟机，并配置好hadoop，所以我开始进行habse的部署 但是由于从未听说过，我便在csdn找了篇配置的文章进行配置，如下https://blog.c 阅读全文

摘要： 在假期的第八周，我本周实现了最后的对之前所学知识的一个实践，对数据进行清洗，统计，并利用fineBI工具进行可视化展示。 学习内容概述 案例基础认知：了解数据分析案例的背景信息、业务目标需求（如用户行为分析、聊天数据统计等），以及原始数据的内容与结构，为后续分析奠定基础。 数仓与 ETL 操作：在 阅读全文

摘要： 在假期的第七周，我本周对 Apache Hive 的数据操作（DML）与常用函数展开学习，包括HiveSQLLoad加载数据语句、HiveSQLInsert插入数据语句、HiveSQLSelect基础查询语句、HiveSQLJoin查询语句、HiveSQL常用函数的使用等 学习内容概述 数据加载与插 阅读全文

摘要： 在假期的第六周，我本周学习了 MapReduce、YARN 和 Hive 框架这部分内容，理解了分布式计算 “分而治之” 的核心思想和MapReduce 程序的提交方法与完整执行流程，还学习了 YARN 的功能、架构组件，了解了程序提交至 YARN 的交互流程及常见调度策略；同时，明确了数据仓库的定 阅读全文

摘要： 在假期的第五周，我本周围绕 Hadoop 基础与分布式存储展开学习，了解Hadoop发展历史、现状、掌握Hadoop集群架构、角色、掌握Hadoop集群分布式安装部署、理解分布式存储的概念与实现、掌握HDFS分块存储、副本机制等特性、学会shell操作HDFS、掌握HDFS读写文件基本流程等内容。 阅读全文

摘要： 在假期的第四周，我大数据开发基础环境配置，包括设置VMware网络、CentOS操作系统三台、虚拟机系统配置：主机名、固定IP、SSH免密登录、配置主机名映射、配置SSH免密登录、创建hadoop用户并配置免密登录、JDK1.8环境部署防火墙、SELinux、时间同步设置快照这些前期准备，为后期学习 阅读全文

摘要： 在假期的第三周，我系统性地学习了Linux操作系统的核心基础知识，包括基础命令操作、用户权限管理、软件安装与环境配置等内容，并结合实际需求进行了动手实践。以下为本周的详细学习总结： 学习内容概述 Linux基础命令： 文件与目录管理：ls、cd、mkdir、rm、cp、mv等命令的熟练使用，掌握通配 阅读全文

摘要： 在假期的第二周，我完成了苍穹外卖项目的核心开发，并进一步学习了数据可视化（ECharts）和Excel报表导出（Apache POI）功能。随后，为了后续大数据方向的学习，我开始初步接触Linux系统，并进行了基础环境配置。以下是本周的具体学习情况： 学习内容概述 ECharts 数据可视化： 学习 阅读全文