2019年10月12日
小记---------CDH版大数据组件--clouderManager UI界面
摘要： 启动 /opt/cm-5.14.0/etc/init.d/clouder-scm-server start /opt/cm-5.14.0/etc/init.d/clouder-scm-agent start 阅读全文
posted @ 2019-10-12 19:01 二黑诶 阅读(570) 评论(0) 推荐(0)
小记---------sparkRDD的Transformation 和 Action 及案例 原理解释
摘要： RDD ：弹性分布式数据集；是一个容错的、并行的数据结构，可以让用户显式地将数据存储到磁盘或内存中，并控制数据的分区 RDD是Spark的核心数据结构，通过RDD的依赖关系形成Spark的调度顺序。所谓Spark应用程序，本质是一组对RDD的操作 RDD的两种创建方式 从文件系统输入（如HDFS）创 阅读全文
posted @ 2019-10-12 11:03 二黑诶 阅读(326) 评论(0) 推荐(0)