首页
新闻
博问
会员
推广
闪存
班级
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
gongxiucheng
博客园
首页
新随笔
联系
订阅
管理
2023年9月24日
Doris/StarRocks原厂技术培训
摘要:
1.适用对象: 基于doris/starrocks的数仓运维人员或者数据分析师 2.培训方式: 现场或者在线 3.联系方式微信:Emmons_2013 4.欢迎有需要的个人或公司联系
阅读全文
posted @ 2023-09-24 20:34 gongxiucheng
阅读(1)
评论(0)
推荐(0)
编辑
2022年4月25日
将博客搬至CSDN
摘要: move blog to csdn
阅读全文
posted @ 2022-04-25 10:41 gongxiucheng
阅读(11)
评论(0)
推荐(0)
编辑
2022年4月19日
使用最新发布的flink tidb cdc 同步数据到StarRocks
摘要: flink tidb cdc同步数据到olap分析利器StarRocks中
阅读全文
posted @ 2022-04-19 19:26 gongxiucheng
阅读(1998)
评论(0)
推荐(1)
编辑
2022年4月2日
使用StarRocks内置工具Routine Load同步Mysql/TIDB/PG等增量更新数据到StarRocks
摘要: 什么是StarRocks? StarRocks是新一代极速统一的olap新型mpp分析型数据库,全面向量化引擎,全新的CBO优化器,性能强悍,单表查询媲美业界最强悍的clickhouse,支持多表join,支持数据秒级更新; 且同时支持高并发,极简架构,方便运维扩展,完全国产,安全可控,在国内外各行
阅读全文
posted @ 2022-04-02 17:44 gongxiucheng
阅读(419)
评论(0)
推荐(0)
编辑
2019年10月10日
SPARK+LIVY
摘要: Apache Livy简介 拥有可用于多Spark作业或多客户端长时间运行的SparkContext; 同时管理多个SparkContext,并在集群(YARN / Mesos)而不是Livy服务器上运行它们,以实现良好的容错性和并发性; 可以通过预先编译好的JAR、代码片段或是java/scala
阅读全文
posted @ 2019-10-10 20:26 gongxiucheng
阅读(1384)
评论(0)
推荐(0)
编辑
2019年2月19日
kyligence enterprise3.2.x版本使用mysql作为数据源构建报错
摘要: 1.报错信息如下: 2.project级别配置如下: 3.cube级别配置采用的是默认; 4.解决办法:
阅读全文
posted @ 2019-02-19 19:15 gongxiucheng
阅读(388)
评论(0)
推荐(0)
编辑
2019年1月2日
apache-kylin-2.5.2-bin-cdh57与cdh-5.13.0集群整合运用
摘要: 1.下载kylin最新版apache-kylin-2.5.2-bin-cdh57; 2.解压配置环境变量; 3.修改kylin中配置文件kylin.properties 添加: 4.kafka streaming cude 构建:
阅读全文
posted @ 2019-01-02 16:38 gongxiucheng
阅读(594)
评论(0)
推荐(0)
编辑
2018年12月13日
spark submit参数及调优(转载)
摘要: spark submit参数介绍 你可以通过spark-submit --help或者spark-shell --help来查看这些参数。 使用格式: ./bin/spark-submit \ --class <main-class> \ --master <master-url> \ --depl
阅读全文
posted @ 2018-12-13 11:07 gongxiucheng
阅读(1116)
评论(0)
推荐(0)
编辑
2018年12月12日
spark on yarn 资源调度(cdh为例)
摘要: 一、CPU配置: ApplicationMaster 虚拟 CPU内核 ApplicationMaster占用的cpu内核数(Gateway--资源管理 ) //一般设置1个核,如果想启动时候快一点可以多设置核数,但它不管资源分配,所以只要保证任务执行过程中不挂就可以了 容器虚拟 CPU内核 //单
阅读全文
posted @ 2018-12-12 17:32 gongxiucheng
阅读(2462)
评论(0)
推荐(0)
编辑
2018年11月27日
spark读取mongodb数据写入hive表中
摘要: 一 环境: 二.数据情况: 三.Eclipse+Maven+Java 3.1 依赖: 3.2 代码: 工具类: 四 错误解决办法: 下载cdh集群Hive的hive-site.xml文件,在项目中新建resources文件夹,讲hive-site.xml配置文件放入其中: 五 执行情况: 耗时14m
阅读全文
posted @ 2018-11-27 16:39 gongxiucheng
阅读(3248)
评论(0)
推荐(0)
编辑
下一页
公告