2018年8月1日
kafka如何保证数据不被重复消费并且不丢失数据
摘要： Kafka如何保证数据不重复消费，不丢失数据 不重复消费： 1.幂等操作，重复消费不会产生问题 2. dstream.foreachRDD {(rdd, time) = rdd.foreachPartition { partitionIterator => val partitionId = Tas 阅读全文
posted @ 2018-08-01 17:12 uuhh 阅读(24206) 评论(0) 推荐(0)
Exception in thread "main" java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected
摘要： hadoop目录下存在老版本jline：/hadoop-2.6.0/share/hadoop/yarn/lib：-rw-r--r-- 1 root root 87325 Mar 10 18:10 jline-0.9.94.jar 阅读全文
posted @ 2018-08-01 15:04 uuhh 阅读(410) 评论(0) 推荐(0)