摘要: 创建 一个 shell 文件 looprtask.sh 添加内容 如下: EXPORT_START_DATE=$1EXPORT_END_DATE=$2 #parameter example#EXPORT_START_DATE=2019-01-01 #EXPORT_END_DATE=2019-01-0 阅读全文
posted @ 2020-02-13 11:32 bjxdd 阅读(664) 评论(0) 推荐(0)
摘要: Dim str_nfd As String '缓存暂时还没有找到对应英文单词的中文字段 Dim str_fd As String '缓存已经找到对应英文单词的中文字段 Dim str_map_path As String '中英文映射txt文件位置 "D:\rdw\docs\AttrC2E.txt" 阅读全文
posted @ 2020-01-06 10:17 bjxdd 阅读(628) 评论(0) 推荐(0)
摘要: ####################################################### ######################################control##create by zhangpengfei EBIHOME=/dwdata/dwetl_v5 阅读全文
posted @ 2020-01-02 09:00 bjxdd 阅读(694) 评论(0) 推荐(0)
摘要: (一) 安装准备:[root@master flink-dist]# mvn --versionApache Maven 3.2.5 [root@master flink-dist]# scala -versionScala code runner version 2.12.6 --[root@ma 阅读全文
posted @ 2020-01-01 14:26 bjxdd 阅读(4439) 评论(0) 推荐(0)
摘要: 参照 https://www.cnblogs.com/itgiser/p/11345636.html 源码方式安装 第一步:卸载旧的git版本、 $ yum remove git 第二步:下载git $ wget --no-check-certificate https://www.kernel.o 阅读全文
posted @ 2019-12-31 11:27 bjxdd 阅读(508) 评论(0) 推荐(0)
摘要: (一) 下载 :wget http://mirror.bit.edu.cn/apache/flume/1.8.0/apache-flume-1.8.0-bin.tar.gz tar -zxvf apache-flume-1.8.0-bin.tar.gz -C /home/hadoop (二)编辑工程 阅读全文
posted @ 2019-12-24 09:44 bjxdd 阅读(779) 评论(0) 推荐(0)
摘要: flink的比较全的思维导图框架 https://www.processon.com/view/link/5def67fce4b0c080dba529e3#map flink 中国站 https://ververica.cn/ 实时计算 Flink SQL 核心功能解密(阿里对flinksql的重要 阅读全文
posted @ 2019-12-24 08:57 bjxdd 阅读(241) 评论(0) 推荐(0)
摘要: 原文参见: https://www.jianshu.com/p/3e54a5a39683 消息中间件—Kafka数据存储(一) 摘要:消息存储对于每一款消息队列都非常重要,那么Kafka在这方面是如何来设计做到高效的呢?Kafka这款分布式消息队列使用文件系统和操作系统的页缓存(page cache 阅读全文
posted @ 2019-12-18 14:59 bjxdd 阅读(414) 评论(0) 推荐(0)
摘要: ES、TIDB、HAWQ、ADS、mysql、kylin 阅读全文
posted @ 2019-12-17 11:39 bjxdd 阅读(369) 评论(0) 推荐(0)
摘要: hawq是 hadoop with query的 简称。hawq源于greenplum,与tidb 同属于 mpp架构的数据库。 ADS的比较。 市场上其他的大公司入 aws的———— 微软的 ———— 阅读全文
posted @ 2019-12-17 11:36 bjxdd 阅读(1832) 评论(0) 推荐(0)