08 2024 档案

摘要：Blog 08: Hadoop 安全性和权限控制 摘要 本周我投入了4小时深入学习Hadoop的安全性机制,特别关注了Kerberos认证系统和访问控制列表(ACL)。我深入研究了如何在Hadoop环境中配置和启用Kerberos,以确保数据的安全性。同时,我还学习了如何通过ACL精细控制用户对HD 阅读全文

摘要：Blog 07: HBase：Hadoop 的 NoSQL 存储 摘要 本周我将学习重点放在了HBase上,总共投入了5小时的时间。我深入研究了HBase的基本概念、独特的数据模型以及其整体架构,特别关注了它与HDFS的紧密集成。通过hands-on实验,我成功搭建了一个小型的HBase环境,并实践 阅读全文

摘要：Blog 06: Hive 数据仓库和查询优化 摘要 本周我投入了约7小时深入学习Apache Hive。我探索了Hive的架构及其与Hadoop生态系统的紧密关系,学习了如何创建数据库和表,编写HiveQL查询,以及多种优化查询性能的方法。通过在Hive中进行实际的数据分析,我亲身体验了数据仓库在 阅读全文

摘要：Blog 05: Hadoop YARN 的资源管理和调度 摘要 本周,我投入了6小时深入学习Hadoop YARN(Yet Another Resource Negotiator)的资源管理和调度机制。我深入探讨了YARN的架构及其在Hadoop生态系统中的核心作用,特别关注了ResourceMa 阅读全文

摘要：Blog 04: 探索 Hadoop MapReduce 框架 摘要 本周我投入了约8小时深入学习Hadoop MapReduce框架。我的重点是研究Map和Reduce阶段的工作原理及其编程模型。通过实现一个简单但经典的WordCount程序,我获得了对MapReduce执行过程的直观理解,并探索 阅读全文