导航

• 博客园
• 首页
• 新随笔
• 新文章
• 联系
• 订阅
• 管理

随笔分类 -  大数据常见问题

解决大数据开发过程中常见的错误

• Hive_UDF函数中集合对象初始化的注意事项
  摘要：UDF函数中定义的集合对象何时初始化 udf函数放在sql中对某个字段进行处理，那么在底层会创建一个该类的对象，这个对象不断的去调用这个evaluate(...)方法，截图如下： 1.1 如果说对于每一条传入UDF中需要处理的数据都需要全新的集合对象，那么这个时候集合对象就需要在类中声明，在eval 阅读全文
  posted @ 2018-01-25 17:51 日月的弯刀 阅读(2151) 评论(0) 推荐(0)
• kafka producer生产数据到kafka异常：Got error produce response with correlation id 16 on topic-partition...Error: NETWORK_EXCEPTION
  摘要：kafka producer生产数据到kafka异常：Got error produce response with correlation id 16 on topic-partition...Error: NETWORK_EXCEPTION 1.问题描述 2017-09-13 15:11:30. 阅读全文
  posted @ 2017-09-13 16:30 日月的弯刀 阅读(12573) 评论(1) 推荐(0)
• Kafka中操作topic时 Error:Failed to parse the broker info from zookeeper
  摘要：Kafka中操作topic时 Error: Failed to parse the broker info from zookeeper 1.问题描述 2.问题原因 kafka在启动后，会将broker的信息存放在对应的zookeeper里的zNode中，默认存放在zookeeper中的路径 /br 阅读全文
  posted @ 2017-09-11 16:03 日月的弯刀 阅读(3111) 评论(0) 推荐(0)