摘要: spark-运行原理剖析 说明:spark运行一个job大致过程如下 1) 通过sparksubmit(shell)提交应用程序application 2) 在应用提交的机器上创建driverActior进程,创建driver 3) Driver进程读取代码,首先创建sparkContext上下文 阅读全文
posted @ 2020-03-20 16:01 javasmoke 阅读(164) 评论(0) 推荐(0)
摘要: spark 运行原理图如下 说明:spark从job通过driver提交,到job运行,大致过程如下,jobt提交,启动driver进程,drver首先构建sparkContex,sqlContext里面3个重要组件,DAGscheduler,TaskScheduler,SparkUI,sparkC 阅读全文
posted @ 2020-03-20 15:56 javasmoke 阅读(262) 评论(0) 推荐(0)
摘要: JFINAL开发环境的搭建过程 (一)学习的地址 急速开发学习:https://www.jfinal.com/ (二)undertow模式非web项目的搭建 2.1mavne项目的新建 在eclipse中新建maven项目 新建时候,选择quickstar 骨架 最后生成目录结构 修改pomxml文 阅读全文
posted @ 2020-03-20 15:32 javasmoke 阅读(594) 评论(0) 推荐(0)