2019 年 2月 13 日随笔档案 - 好像条狗

2019年2月13日

摘要： load data local inpath '/home/csqinwj/test/huoke/0514/dws_dwtb_getguest_market/dal_bdcsc_mdn_id_d/data/dws_wdtb_cdr_mix_msk_d1.txt' overwrite into tab 阅读全文

posted @ 2019-02-13 14:25 好像条狗阅读(573) 评论(0) 推荐(0)

hive的sql语句小节

摘要： 20180615： Hive是基于Hadoop的一个数据仓库工具，是一种逻辑上的数据库，依赖hdfs文件系统；它把实际的数据文件映射为一张数据库表来作为元数据来管理hdfs上的数据。Hive存在的意义并非数据存储，而是被用来处理数据的，它计算的实质是用sql调用了底层的mapreduce。因为hiv 阅读全文

posted @ 2019-02-13 14:23 好像条狗阅读(412) 评论(0) 推荐(0)

连接kv过程中的问题小节

摘要： 20170104 1.执行结果：不可以是通过，需要测试完成后再标是否通过 SFTP协议数据接入，SFTP的server还没有搭建 CTYUN_BDOP_BDDFA_0002 SFTP协议数据接入，SFTP的server还没有搭建 CTYUN_BDOP_BDDFA_0002 3.CTYUN_BDOP_ 阅读全文

posted @ 2019-02-13 14:20 好像条狗阅读(217) 评论(0) 推荐(0)

linux操作文本三个命令awk、grep、sed

摘要： awk、grep、sed是linux操作文本的三大利器，合称文本三剑客，也是必须掌握的linux命令之一。三者的功能都是处理文本，但侧重点各不相同，其中属awk功能最强大，但也最复杂。grep更适合单纯的查找或匹配文本，sed更适合编辑匹配到的文本，awk更适合格式化文本，对文本进行较复杂格式处理。阅读全文

posted @ 2019-02-13 14:16 好像条狗阅读(438) 评论(0) 推荐(0)