sanmutongzi

摘要： 转发请注明原创地址：http://www.cnblogs.com/dongxiao-yang/p/7652337.html 1 WindowFunction类型不匹配无法编译。 flink 版本：1.3.0 参考https://ci.apache.org/projects/flink/flink-d 阅读全文

摘要： 转发请注明原创地址 http://www.cnblogs.com/dongxiao-yang/p/7610412.html 一 概念 watermark是flink为了处理eventTime窗口计算提出的一种机制,本质上也是一种时间戳，由flink souce或者自定义的watermark生成器按照 阅读全文

摘要： 转载请注明原创地址：http://www.cnblogs.com/dongxiao-yang/p/7600561.html 一 broker启动后ReplicaFetcherThread OOM 版本：0.8.2.2 错误现象，server启动日志： WARN [ReplicaFetcherThre 阅读全文

摘要： 转发请注明原创地址 http://www.cnblogs.com/dongxiao-yang/p/7463693.html kafka新版consumer所有的group管理工作在服务端都由GroupCoordinator这个新角色来处理，最近测试发现consumer在reblance过程中会有各种 阅读全文

摘要： 转载请注明原创地址 http://www.cnblogs.com/dongxiao-yang/p/7200599.html flink官方提供了连接kafka的connector实现，由于调试的时候发现部分消费行为与预期不太一致，所以需要研究一下源码。 flink-connector-kafka目前 阅读全文

摘要： 转载请注明原创地址：http://www.cnblogs.com/dongxiao-yang/p/7200971.html 最近需要研究flink-connector-kafka的消费行为，发现flink使用了kafka consumer一个比较底层一点的assign接口而不是之前比较常用的subs 阅读全文

摘要： 转载请注明原创地址:http://www.cnblogs.com/dongxiao-yang/p/7131626.html kafka从0.9版本以后引入了集群安全机制，由于最近需要新搭建一套kafka集群，决定采用SASL/GSSAPI (Kerberos) 作为新集群的权限系统基础，本次新集群版 阅读全文

摘要： 转载请注明出处 http://www.cnblogs.com/dongxiao-yang/p/6410775.html 参考引言：在排序算法中快速排序的效率是非常高的，但是还有种排序算法的效率可以与之媲美，那就是归并排序；归并排序和快速排序有那么点异曲同工之妙，快速排序：是先把数组粗略的排序成两个子 阅读全文

摘要： 转发请注明原创地址 http://www.cnblogs.com/dongxiao-yang/p/6381037.html 流式计算中我们经常会遇到需要将数据根据时间窗口进行批量统计的场景，窗口性质一般由两个参数规定：1 Window length： 可以用时间或者数量来定义窗口大小；2 Slidi 阅读全文

摘要： 转载请注明原创地址http://www.cnblogs.com/dongxiao-yang/p/6293807.html java.util.concurrent.PriorityBlockingQueue内部用二叉堆实现了一个优先队列，所有插入的元素必须实现java.lang.Comparable 阅读全文