会员
周边
新闻
博问
闪存
赞助商
YouClaw
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
帅东我不帅
博客园
首页
新随笔
联系
订阅
管理
2023年1月17日
记一次hive之间ip不通导数据
摘要: 1、首先在目标库建立相同的表 ,加载数据路径要符合环境目录。 2、将生产数据下载到本地hadoop dfs -get /user/hive/warehouse/dw.db/表名/d_1=20230112 /tmp/hivedata 3、将其打包成tar.gz 传到目标服务器解压 4、将解压文件上传到
阅读全文
posted @ 2023-01-17 15:11 帅东我不帅
阅读(36)
评论(0)
推荐(0)
2022年10月9日
记一次es restAPI的filters聚合
摘要: pointMap.forEach((provinceName, points) -> { GeoPolygonQueryBuilder polygonFilterBuilder = QueryBuilders.geoPolygonQuery("location", points); FiltersA
阅读全文
posted @ 2022-10-09 17:52 帅东我不帅
阅读(150)
评论(0)
推荐(0)
2022年9月21日
flinksql实时数仓开发
摘要: pom文件 <groupId>com.ssi</groupId> <artifactId>datalake</artifactId> <packaging>pom</packaging> <version>1.0-SNAPSHOT</version> <name>DataLake</name> <p
阅读全文
posted @ 2022-09-21 19:14 帅东我不帅
阅读(263)
评论(0)
推荐(0)
2022年4月25日
es transportClient切换为restHighLevelClient查询
摘要: 1.pom依赖 <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</artifactId> <version>6.1.1</version
阅读全文
posted @ 2022-04-25 11:31 帅东我不帅
阅读(331)
评论(0)
推荐(0)
linux查看hive表信息
摘要: 查看表大小单位到G: hdfs dfs -count -q -h 表路径/分区路径
阅读全文
posted @ 2022-04-25 09:02 帅东我不帅
阅读(233)
评论(0)
推荐(0)
2021年10月12日
streaming直连kafka消费
摘要: pom文件: kafka2.2.1和cdh6.3.0+spark2.4.0+版本 <dependencies> <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.10</artifactId> <version>
阅读全文
posted @ 2021-10-12 09:44 帅东我不帅
阅读(54)
评论(0)
推荐(0)
2021年8月1日
linux将文件夹打包成tar.gz
摘要: tar -czf log.tar.gz flink-1.10.0/
阅读全文
posted @ 2021-08-01 15:07 帅东我不帅
阅读(1942)
评论(0)
推荐(0)
2021年5月28日
excel时间戳转换时间
摘要: =TEXT((G168/1000+8*3600)/86400+70*365+19,"yyyy-mm-dd HH:mm:ss")
阅读全文
posted @ 2021-05-28 09:48 帅东我不帅
阅读(399)
评论(0)
推荐(0)
2021年3月24日
es批量删除文档
只有博主才能阅读该文。
阅读全文
posted @ 2021-03-24 19:29 帅东我不帅
阅读(0)
评论(0)
推荐(0)
2021年1月27日
自动生成接口文档apiggs
只有博主才能阅读该文。
阅读全文
posted @ 2021-01-27 19:46 帅东我不帅
阅读(45)
评论(0)
推荐(0)
下一页
公告