摘要：
需求： 在一个只有内网的服务器中安装某些需要进行源码编译的软件，并且该软件具有大量的依赖，最坑的是服务器只安装了基本的软件，现在需要... 阅读全文
posted @ 2022-11-09 20:37 ggzone 阅读(2356) 评论(0) 推荐(0)
摘要：
run命令运行过程读取dag文件生成task依赖关系，然后生成封装airflow run的command命令，通过celery发送到executor端，重新执行该airflow run命令。scheduler命令运行过程：调度器通过SchedulerJob类... 阅读全文
posted @ 2018-10-29 16:01 ggzone 阅读(621) 评论(0) 推荐(0)
摘要：
spark-network-common模块底层使用netty作为通讯框架，可以实现rpc消息、数据块和数据流的传输。Message类图： 所有request消息都是RequestMessage的子类 所有response消息都是ResponseMessag... 阅读全文
posted @ 2017-09-28 13:27 ggzone 阅读(262) 评论(0) 推荐(0)
摘要：
解决方案： 修改maven的pom.xml文件不拷贝资源文件 src/main/resources * true 修改打包方式 org.springfram... 阅读全文
posted @ 2017-09-12 19:50 ggzone 阅读(334) 评论(0) 推荐(0)
摘要：
解决方案： 修改maven的pom.xml文件不拷贝资源文件 src/main/resources * true 修改打包方式 org.springframework.boot ... 阅读全文
posted @ 2017-09-12 19:49 ggzone 阅读(6326) 评论(0) 推荐(0)
摘要：
class TransportServer bootstrap.childHandler(new ChannelInitializer() { @Override protected void initChannel(SocketCha... 阅读全文
posted @ 2017-03-07 16:16 ggzone 阅读(298) 评论(0) 推荐(0)
摘要：
class TransportServer bootstrap.childHandler(new ChannelInitializer() { @Override protected void initChannel(SocketChannel ch) thro... 阅读全文
posted @ 2017-03-07 16:15 ggzone 阅读(396) 评论(0) 推荐(0)
摘要：
从SparkPi的一个行动操作入手，选择Run–Debug SparkPi进入调试： F8：Step Over F7：Step Into 右键Run to Cursor Ctrl+B 查看定义 导航–Back和ForwardSparkPi：val count... 阅读全文
posted @ 2016-12-22 16:41 ggzone 阅读(224) 评论(0) 推荐(0)
摘要：
从SparkPi的一个行动操作入手，选择Run–Debug SparkPi进入调试： F8：Step Over F7：Step Into 右键Run to Cursor Ctrl+B 查看定义 导航–Back和ForwardSparkPi：val count = spark.spar... 阅读全文
posted @ 2016-12-22 16:40 ggzone 阅读(373) 评论(0) 推荐(0)
摘要：
环境：win10、IDEA2016.3、maven3.3.9、git、scala 2.11.8、java1.8.0_101、sbt0.13.12下载：#git bash中执行：git clone https://github.com/apache/spark.gitgit taggi... 阅读全文
posted @ 2016-12-22 16:06 ggzone 阅读(918) 评论(0) 推荐(0)
浙公网安备 33010602011771号