2025年3月24日
Spark相关面试题
摘要： ‌一、Spark核心概念‌ 1、RDD的五大特性是什么？如何理解弹性分布式数据集？ RDD的五大特性包括：分区列表（Partitions）、依赖关系（Dependencies）、计算函数（Compute Function）、分区器（Partitioner）和优先位置（Preferred Locati 阅读全文
posted @ 2025-03-24 21:18 业余砖家 阅读(241) 评论(0) 推荐(0)
Spark 组件在 Java 大数据开发中‌的常见报错及解决方案
摘要： 以下是几个 ‌及解决方案，结合具体场景说明： 案例1：Guava 依赖冲突导致 IllegalAccessError ‌报错信息‌：java.lang.IllegalAccessError: tried to access method com.google.common.base.Stopwatc 阅读全文
posted @ 2025-03-24 15:43 业余砖家 阅读(191) 评论(0) 推荐(0)
大数据Java开发中常见的报错
摘要： 以下是一些 ‌大数据Java开发‌ 中常见的实际报错案例及解决方案，结合典型场景（如Hadoop、Spark、Flink等框架）说明： ‌案例1：HDFS文件写入权限不足‌ ‌报错信息‌：org.apache.hadoop.security.AccessControlException: Permi 阅读全文
posted @ 2025-03-24 15:39 业余砖家 阅读(62) 评论(0) 推荐(0)