摘要： sql的书写顺序 1 SELECT DISTINCT <select_list> 2 FROM <left_table> 3 <join_type> JOIN <right_table> 4 ON <join_condition> 5 WHERE <where_condition> 6 GROUP 阅读全文

摘要： 1）date_format函数（根据格式整理日期） 作用：把一个字符串日期格式化为指定的格式。 select date_format('2017-01-01','yyyy-MM-dd HH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式 结果：2017-01-01 00:00:00 阅读全文

摘要： 1、Spark Streaming第一次运行不丢失数据 kafka参数 auto.offset.reset 参数设置成earliest 从最初始偏移量开始消费数据。 2、Spark Streaming精准一次消费 手动维护偏移量 处理完业务数据后，再进行提交偏移量操作 极端情况下，如在提交偏移量时断 阅读全文