2016年11月27日
摘要: 如何能更好的运用与监控sparkSQL?或许我们改更深层次的了解它深层次的原理是什么。之前总结的已经写了传统数据库与Spark的sql解析之间的差别。那么我们下来直切主题~ 如今的Spark已经支持多种多样的数据源的查询与加载,兼容了Hive,可用JDBC的方式或者ODBC来连接Spark SQL。 阅读全文
posted @ 2016-11-27 14:55 松伯 阅读(5305) 评论(0) 推荐(0) 编辑
摘要: 之前阅读也有总结过Block的RPC服务是通过NettyBlockRpcServer提供打开,即下载Block文件的功能。然后在启动jbo的时候由Driver上的BlockManagerMaster对存在于Executor上的BlockManager统一管理,注册Executor的BlockMana 阅读全文
posted @ 2016-11-27 10:33 松伯 阅读(1648) 评论(0) 推荐(0) 编辑