08 2018 档案
摘要:Spark setMaster源码 要连接到的主URL,例如“local”用一个线程在本地运行,“local [ 4 ]”用4个内核在本地运行,或者“Spark : / / master : 7077”用Spark独立集群运行。 基于排序机制的wordCount java 版本: scala版本:
阅读全文
摘要:jupyter运维常见CLI 查看安装的内核和位置 anaconda列出所有的环境
阅读全文
摘要:oozie是一个工作流调度系统,用于管理Apache Hadoop作业。 oozie工作流作业是操作的有向无环图( DAGs )。 Oozie协调器作业是由时间(频率)和数据可用性触发的重复Oozie工作流作业。 oozie与Hadoop堆栈的其余部分集成,支持几种现成的Hadoop作业(如Java
阅读全文
摘要:1.新建project 2.选择Spring Initializr,next 3.输入项目信息,next 4.选择web依赖以及Spring Boot的版本,next 5.Finish 6.Enable Auto-Import
阅读全文

浙公网安备 33010602011771号