随笔分类 -  大数据框架

主要是的hadoop+Spark框架的的分布式编程以及运行机制
spark机制理解（一）
摘要：一 基本术语 Application: 基于Spark的用用户程序,包含了Driver程序和集群上的Executor. Driver Program: 运行行main函数并且新建SparkContext的程序. Cluster Manager: 在集群上获取资源的外部服务(例如:standalone 阅读全文
posted @ 2016-09-01 12:48 夜半仰望者 阅读(1262) 评论(0) 推荐(0)