摘要: 1. 幂等性设计1.1 引入目的生产者重复生产消息。生产者进行retry会产生重试时,会重复产生消息。有了幂等性之后,在进行retry重试时,只会生成一个消息。 1.2 幂等性实现1.2.1 PID 和 Sequence Number为了实现Producer的幂等性,Kafka引入了Producer 阅读全文
posted @ 2018-12-27 14:23 大数据从业者FelixZh 阅读(6183) 评论(0) 推荐(4)
摘要: 多人开发时,会出现明明在gitignore中忽略了.idea文件夹,但是提交时仍旧会出现.idea内文件变动的情况 原因.idea已经被git跟踪,之后再加入.gitignore后是没有作用的 解决办法清除.idea的git缓存 参考: https://stackoverflow.com/quest 阅读全文
posted @ 2018-12-27 11:36 大数据从业者FelixZh 阅读(2990) 评论(0) 推荐(0)
摘要: 大致就是 工程里分了 java 代码 和 scala 代码。 然后在java代码中 引用了 scala 的代码。 运行不报错。 但是打包就是一直报错。 如果直接把java代码放在 scala 里面,编译时会直接忽略这个类,不参与编译。 在pom 里加了一个插件,解决了报错问题。 <plugin> < 阅读全文
posted @ 2018-12-27 11:10 大数据从业者FelixZh 阅读(4304) 评论(0) 推荐(0)
大数据从业者