摘要: 由于明天开始放中秋节的假期,今天上完课,就很放松,看了看考公内容,早早就休息了 阅读全文
posted @ 2024-09-14 20:24 Mini-Q 阅读(0) 评论(0) 推荐(0) 编辑
摘要: 今天没课,上午看了看六级的题,下午和室友去北辰广场踢了踢球,累的要死 阅读全文
posted @ 2024-09-12 20:48 Mini-Q 阅读(1) 评论(0) 推荐(0) 编辑
摘要: 今天下午没课,买了套六级复习资料,准备复习考试,明天整天没课,好好规划一下 阅读全文
posted @ 2024-09-11 22:55 Mini-Q 阅读(1) 评论(0) 推荐(0) 编辑
摘要: 今天上午本来就很累,中午还要评议,中午饭都快没时间吃,下午又要去上课,晚上看了看四六级报名时间,准备报名 阅读全文
posted @ 2024-09-11 22:54 Mini-Q 阅读(2) 评论(0) 推荐(0) 编辑
摘要: 今天是开学第一天,上了建民的课,检查了Hadoop,看了一段视频,并了解软件设计思维的重要性,今天一天满课,很累 阅读全文
posted @ 2024-09-11 22:53 Mini-Q 阅读(2) 评论(0) 推荐(0) 编辑
摘要: 在深入学习Hadoop的过程中,我逐渐探索了其高级特性和性能优化的技巧,发现这些方法对提升数据处理的效率和集群的稳定性至关重要。Hadoop,作为一个强大的大数据处理框架,其核心组件包括HDFS(分布式文件系统)和YARN(Yet Another Resource Negotiator)。在掌握了基 阅读全文
posted @ 2024-09-08 21:04 Mini-Q 阅读(6) 评论(0) 推荐(0) 编辑
摘要: 在学习Hadoop的过程中,我逐渐意识到数据安全和管理是大数据处理中的核心挑战。Hadoop集群作为处理海量数据的强大工具,虽然具备了高效的数据存储和计算能力,但如何保护这些数据免受未经授权的访问和损坏,也是必须解决的重要问题。因此,我开始关注Hadoop在数据安全和管理方面的功能和策略,以确保数据 阅读全文
posted @ 2024-08-26 09:18 Mini-Q 阅读(3) 评论(0) 推荐(0) 编辑
摘要: 除了HDFS和MapReduce,Hadoop生态系统还包含了许多其他强大且实用的工具和框架,它们在数据分析和处理领域中发挥了重要作用。其中,Hive、Pig和Spark是几个尤为重要的组件,它们为处理和分析大数据提供了更高层次的抽象和简化的操作流程。在这篇报告中,我将分享我对这些工具的探索与使用经 阅读全文
posted @ 2024-08-20 15:34 Mini-Q 阅读(1) 评论(0) 推荐(0) 编辑
摘要: 在Hadoop学习的过程中,我进入了更具挑战性的阶段——编写和优化MapReduce任务。MapReduce是一种处理大规模数据集的编程模型,它将复杂的数据处理任务分解为两个主要阶段:Map(映射)和 Reduce(归约)。通过这一过程,我不仅能解决实际的数据处理问题,还能在分布式环境中高效地执行计 阅读全文
posted @ 2024-08-09 12:59 Mini-Q 阅读(3) 评论(0) 推荐(0) 编辑
摘要: 在学习Hadoop的过程中,我克服了一个重要的技术挑战——搭建一个完整的Hadoop集群。Hadoop作为大数据处理的关键工具,其分布式架构使得它能够处理海量数据,并提供高效的数据存储和计算能力。为了掌握这一技术,我从最基础的步骤开始,首先是安装Java和Hadoop的依赖软件。这些软件是搭建Had 阅读全文
posted @ 2024-08-06 13:38 Mini-Q 阅读(3) 评论(0) 推荐(0) 编辑