摘要: Client和cluster区别:diver在集群内(cluster),还是在集群外(client)。 yarn client(集群外) yarn-client模式(driver集群外) 1、执行main方法 2、启动driver线程,执行用户作业,创建scheduleBackend; 3、sche 阅读全文
posted @ 2022-02-28 10:07 RunningNeverStop 阅读(315) 评论(0) 推荐(0) 编辑
摘要: 错误: org.gradle.api.internal.tasks.DefaultTaskContainer$TaskCreationException:Could not create task‘:spotlessInternalRegisterDependencies’.Caused by:or 阅读全文
posted @ 2022-02-21 16:07 RunningNeverStop 阅读(1099) 评论(0) 推荐(0) 编辑
摘要: hadoop的shuffle分为两个阶段map端的shuffle:Sort、Spill、Merge1、来一个输入分片,分配一个map任务来处理,默认以一个HDFS块的大小(64M)为一个分片,把数据首先放到内存中的一个缓冲区,做一些预排序,提升效率;2、每个map任务都有一个内存缓冲区(默认100M 阅读全文
posted @ 2022-02-18 09:36 RunningNeverStop 阅读(94) 评论(0) 推荐(0) 编辑
摘要: springboot启动流程简述 程序入口 @SpringBootApplication public class App { public static void main(String[] args) { SpringApplication application = new SpringApp 阅读全文
posted @ 2022-02-17 16:48 RunningNeverStop 阅读(1196) 评论(0) 推荐(0) 编辑
摘要: select * from treenodes where find_in_set(id, '1,2,3,4,5'); 而不是 select * from treenodes where id = find_in_set(id, '1,2,3,4,5'); 错误 错误 错误 SELECT id,na 阅读全文
posted @ 2020-10-19 20:48 RunningNeverStop 阅读(105) 评论(0) 推荐(0) 编辑
摘要: 注解配置: @Update(" <script> " + " update CS_********_table_name " + " <trim prefix=\"set\" suffixOverrides=\",\"> " + " <trim prefix=\"PROVINCE_CODE =cas 阅读全文
posted @ 2020-09-11 18:19 RunningNeverStop 阅读(3182) 评论(0) 推荐(0) 编辑
摘要: 筛选一批数据的id,列转行时,发现一部分id被截取的不见了,遂记录下来以防忘记。 用了group_concat后,select里如果使用了limit是不起作用的.用group_concat连接字段的时候是有长度限制的,并不是有多少连多少,一旦查询的数据超过1024,就会自动截取。但你可以设置一下。 阅读全文
posted @ 2020-09-06 09:28 RunningNeverStop 阅读(2743) 评论(0) 推荐(0) 编辑
摘要: @Select({"<script>", "select id,ifExam,choiceFlag,hotFlag,toIndex,examId,examTarget,examUrl,passScore from OMLOPERMATERIAL where 1=1 ", "<if test=\"wi 阅读全文
posted @ 2020-08-28 16:27 RunningNeverStop 阅读(329) 评论(0) 推荐(0) 编辑
摘要: 查看自带jdk:rpm -qa|grep java 显示: tzdata-java-2016c-1.el6.noarchjava-1.6.0-openjdk-1.6.0.38-1.13.10.4.el6.x86_64java-1.7.0-openjdk-1.7.0.99-2.6.5.1.el6.x8 阅读全文
posted @ 2020-08-15 16:54 RunningNeverStop 阅读(290) 评论(0) 推荐(0) 编辑
摘要: 当前ID为5,读取上一条记录: SELECT * FROM A WHERE ID < 5 ORDER BY ID DESC LIMIT 0,1; ps: select * from table1 where id<$id order by id desc limit 1 当前ID为5,读取下一条记录 阅读全文
posted @ 2020-08-03 22:51 RunningNeverStop 阅读(285) 评论(0) 推荐(0) 编辑