7-28

  1. 今日完成任务

统计各城市指定招聘岗位的平均工资

统计指定城市和指定岗位的工资待遇

  1. 核心源码

 

 

 

 

 

 3.遇到的问题

 中文乱码

 

 

 

 

导出job一直失败(url不加useUnicode=true&characterEncoding=utf-8" 时候偶儿成功,但是中文乱码,修改后job一直运行失败)

 

4.解决办法

 

 

 

 

 

 

先用上述语句修改,后来发现当前修改方式范围是session

后改为在my.cnf下添加

 

 

建表语句后加default charset=utf8

mysql5.7.18开始不在二进制包中提供my-default.cnf文件,需要自己创建)

 

sqoop执行语句中url指定字符集(指定后必须加上双引号)

 

 

 

 

问题解决

job失败问题在MySQL重新配置之后解决,猜测之前虽然前台没有报错,但内部发生了sql错误,由于yarn上找不到此job信息,无法查看)

 

 

 

 

 

 

5.项目燃尽图更新此内容周一已更新

 

posted @ 2020-07-29 11:01  神鲧  阅读(98)  评论(0)    收藏  举报