2025 年 2月 12 日随笔档案 - Mini-Q

摘要：学习了Spark与Hadoop的集成，掌握了如何在Hadoop集群中运行Spark作业，并了解了两者的协同工作方式。阅读全文

posted @ 2025-02-12 22:54 Mini-Q 阅读(5) 评论(0) 推荐(0)

摘要：学习了PySpark，了解了如何使用Python API进行Spark操作，掌握了PySpark的基本使用方法，以及如何在Python中进行Spark编程。阅读全文

posted @ 2025-02-12 22:54 Mini-Q 阅读(4) 评论(0) 推荐(0)

摘要：学习了Spark MLlib的基础知识，了解了机器学习的基本概念和如何使用Spark MLlib进行数据预处理、模型训练和评估。阅读全文

posted @ 2025-02-12 22:53 Mini-Q 阅读(5) 评论(0) 推荐(0)

摘要：学习了Spark的GraphX库，掌握了如何进行图数据的处理与分析。了解了图的基本概念，以及如何使用GraphX进行图计算和图遍历。阅读全文

posted @ 2025-02-12 22:53 Mini-Q 阅读(7) 评论(0) 推荐(0)

摘要：今天学习了Spark的性能优化技巧，了解了如何通过调整配置参数、选择合适的操作类型等手段，提高Spark任务的执行效率。阅读全文

posted @ 2025-02-12 22:53 Mini-Q 阅读(10) 评论(0) 推荐(0)

Mini-Q