摘要:kafka的安装非常简单, 只需要配置几个必须的参数 首先, 必须要有zookeeper 集群正常启动 1, conf/server.properties配置 broker.id=0 # 第几个broker就写几, 从0开始port=9092 num.network.threads=3 num.io 阅读全文
posted @ 2020-06-11 15:08 bronk 阅读(82) 评论(0) 推荐(0) 编辑
摘要:集群搭建: [root@localhost kafka_2.11-0.10.2.1]# cat config/server.properties | grep -v ^$ | grep -v ^#broker.id=0listeners=PLAINTEXT://node1:9092num.netwo 阅读全文
posted @ 2020-06-11 15:07 bronk 阅读(169) 评论(0) 推荐(0) 编辑
摘要:doris04 自定义建表 [toc] 1. 建表可参考上一个, "doris03 简单使用.md" 2. 数据模型考虑, "doris05 数据模型" 3. 大宽表与 Star Schema doris建表时, 如果是大宽表, 即所有字段都在一条记录中, 性能会非常差. 所以建议将常更新的维度数据 阅读全文
posted @ 2020-02-05 18:47 bronk 阅读(690) 评论(0) 推荐(0) 编辑
摘要:doris03 简单使用 [toc] 1. 设置用户名和密码 1.1) 修改root密码 登陆 是任一 FE 节点的 ip 地址。 是 fe.conf 中的 query_port 配置。 设置密码: 1.2) 创建新用户 后续登陆可以使用新创建的用户登陆 授权: 需要先建库 2 建库建表, 导入数据 阅读全文
posted @ 2020-02-05 17:27 bronk 阅读(764) 评论(0) 推荐(0) 编辑
摘要:doris02 编译安装 [toc] 1. 编译 通过前一个, 我们应该已经编译完成了, 完成后的文件在 目录下 2. 机器要求 2.1) 软件需求 2.2) 硬件需求 + be总磁盘空间按3副本计算的话, 需要 , 然后预留40%作为后台compaction及中间数据存放 + 同一节点可部署多个b 阅读全文
posted @ 2020-02-05 15:25 bronk 阅读(520) 评论(0) 推荐(0) 编辑
摘要:doris01 开始 [toc] https://blog.bcmeng.com/post/meituan doris.html 1. 对比其他的doris doris是一个rolap, 可以满足以下需求 灵活多维分析 明细+聚合 主键更新 相比较kylin, druid而言, Kylin 主要满足 阅读全文
posted @ 2020-02-05 15:22 bronk 阅读(433) 评论(0) 推荐(0) 编辑
摘要:1, 总配置文件 2, 包含其他文件 3, 启动方式 4. 另一个配置样例 阅读全文
posted @ 2019-11-22 10:13 bronk 阅读(355) 评论(0) 推荐(0) 编辑
摘要:1, 下载镜像, 我用的是8 2, 启动镜像 my.cnf的内容 default_authentication_plugin= mysql_native_password (这个是因应mysql8的安全机制升级而需要修改的配置,不配置的话将无法登录管理) 3, 连接进入mysql 4, 通过dock 阅读全文
posted @ 2019-07-29 16:37 bronk 阅读(2252) 评论(0) 推荐(0) 编辑
摘要:v2r@y安装 1. 安装nginx 这儿使用tengine进行安装, 可以看 "以前的博客" 1.1) 注意带 http_v2 编译 不然会报错 如果已经安装的ginx, 可以使用 查看编译参数, 然后加上上述参数重新编译, 之后 , 不执行 , 然后将编译后的nginx进行替换现有的. 1.2) 阅读全文
posted @ 2019-07-27 10:25 bronk 阅读(529) 评论(0) 推荐(0) 编辑
摘要:mongo spark 读取不同的库数据和写入不同的库中 阅读全文
posted @ 2018-11-01 16:55 bronk 阅读(1471) 评论(0) 推荐(0) 编辑