会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
小跳不磕脑袋
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
6
7
8
9
10
11
12
13
14
···
21
下一页
2022年3月21日
2022-03-21 08:00:01
摘要: 2022-03-21 08:00:01
阅读全文
posted @ 2022-03-21 08:00 小跳不磕脑袋
阅读(9)
评论(0)
推荐(0)
2022年3月20日
2022-03-20 08:00:01
摘要: 2022-03-20 08:00:01
阅读全文
posted @ 2022-03-20 08:00 小跳不磕脑袋
阅读(9)
评论(0)
推荐(0)
2022年3月19日
2022-03-19 14:53:02
摘要: 2022-03-19 14:53:02
阅读全文
posted @ 2022-03-19 14:53 小跳不磕脑袋
阅读(14)
评论(0)
推荐(0)
2022年3月14日
正确定位到sqoop导数失败原因
摘要: 1、sqoop导数时,添加额外的配置参数sqoop export -Dorg.apache.sqoop.export.text.dump_data_on_error=true \ --username ${USERNAME} \ ......#其他的配置-Dorg.apache.sqoop.expo
阅读全文
posted @ 2022-03-14 20:52 小跳不磕脑袋
阅读(308)
评论(0)
推荐(0)
hive分隔符_HIVE-默认分隔符的(linux系统的特殊字符)查看,输入和修改
摘要: #修改分隔符为逗号 , ALTER TABLE table_name SET SERDEPROPERTIES ('field.delim' = ',' , 'serialization.format'=','); #修改分隔符为\001,在linux的vim中显示为^A,是hive默认的分隔符 AL
阅读全文
posted @ 2022-03-14 20:35 小跳不磕脑袋
阅读(6450)
评论(0)
推荐(0)
sqoop 迁移hive 到mysql:Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
摘要: 在 mapred-site.xml文件中添加以下内容: <property> <name>yarn.app.mapreduce.am.env</name> <value>HADOOP_MAPRED_HOME=$HADOOP_COMMON_HOME</value></property><propert
阅读全文
posted @ 2022-03-14 16:35 小跳不磕脑袋
阅读(158)
评论(0)
推荐(0)
2022年3月3日
spark streaming 消费kafka数据
摘要: 1.在虚拟机启动zookeeper和kafka,新建topic test1,这里使用的topic 是test1。 2.Scala程序 要修改 3.定义 Kafka 参数 中的主机名称以及要消费的topic名称 package scala.spark import org.apache.kafka.c
阅读全文
posted @ 2022-03-03 15:00 小跳不磕脑袋
阅读(180)
评论(0)
推荐(0)
2022年2月26日
软件架构1500字体会
摘要: ,
阅读全文
posted @ 2022-02-26 06:55 小跳不磕脑袋
阅读(16)
评论(0)
推荐(0)
2022年2月18日
hive的UDF函数和UDTF函数还是挺难的(´・㉨・`)
摘要: insertoverwritetabledwd_base_event_log PARTITION(dt='2019-02-10') select mid_id, user_id, version_code, version_name, lang, source, os, area, model, b
阅读全文
posted @ 2022-02-18 23:25 小跳不磕脑袋
阅读(52)
评论(0)
推荐(0)
2022年2月12日
flume采集kafka到hdfs遇到的问题2
摘要: Exception in thread "SinkRunner-PollingRunner-DefaultSinkProcessor" java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZL
阅读全文
posted @ 2022-02-12 20:20 小跳不磕脑袋
阅读(246)
评论(0)
推荐(0)
上一页
1
···
6
7
8
9
10
11
12
13
14
···
21
下一页
公告