2024年5月3日

底层架构

摘要: 一:角色分类 (1)Coordinator 协调器: 协调器服务监视数据服务器上的历史服务。他们负责将区段分配给特定服务器,并确保区段在历史服务器之间保持良好的平衡。 (2)Overlord: 控制数据摄入任务的分配,Overlord 服务监视数据服务器上的 MiddleManager 服务,并且是 阅读全文

posted @ 2024-05-03 12:29 天生一对 阅读(82) 评论(0) 推荐(0) 编辑

数据摄取

摘要: 一:使用sql加载外部文件(http) REPLACE INTO "wikipedia" OVERWRITE ALL WITH ext AS (SELECT * FROM TABLE( EXTERN( '{"type":"http","uris":["https://druid.apache.org 阅读全文

posted @ 2024-05-03 09:38 天生一对 阅读(4) 评论(0) 推荐(0) 编辑

apache druid 初识

摘要: 一:Apache druid 是一种实时分析数据库,设计用于对大型数据集进行快速分析(OLAP),支持数据的实时摄取,提供低时延的查询性能。 二:Apache druid 主要特点 (1)列式存储格式,查询时只加载特定查询的列,还根据数据类型优化每一列的存储,加快查询速度。 (2)可扩展的分布式系统 阅读全文

posted @ 2024-05-03 09:11 天生一对 阅读(47) 评论(0) 推荐(0) 编辑

2019年11月19日

IPV6

摘要: ``` import java.util.Objects; public class Ipv6 implements Comparable{ private Long first; private Long second; public Ipv6(Long left, Long right) { t 阅读全文

posted @ 2019-11-19 17:00 天生一对 阅读(234) 评论(0) 推荐(0) 编辑

2019年10月18日

java8 instant localDateTime

摘要: ![](https://img2018.cnblogs.com/blog/986140/201910/986140-20191018093718207-107069985.png) 阅读全文

posted @ 2019-10-18 09:33 天生一对 阅读(799) 评论(0) 推荐(0) 编辑

2019年7月30日

FileInputFormat 的实现之TextInputFormat

摘要: 说明 TextInputFormat默认是按行切分记录record,本篇在于理解,对于同一条记录record,如果被切分在不同的split时是怎么处理的。首先getSplits是在逻辑上划分,并没有物理切分,也就是只是记录每个split从文件的个位置读到哪个位置,文件还是一个整体。所以在LineRe 阅读全文

posted @ 2019-07-30 10:07 天生一对 阅读(1468) 评论(0) 推荐(0) 编辑

2018年11月8日

Git服务器,仓库的hook监控

摘要: 简单应用场景:代码提交到git仓库,仓库监控到变化的jar包,然后把变化的jar包推到私服maven仓库。 Git预定义了触发时机: ClientSide hooks: 1 pre commit,当执行commit动作时先执行此hook,可以用此hook做一些检查,比如代码风格检查,或者先跑测试。 阅读全文

posted @ 2018-11-08 20:23 天生一对 阅读(1993) 评论(0) 推荐(0) 编辑

2018年10月26日

Linux 开机启动图形界面,shell界面

摘要: ``` 查看当前启动模式 # systemctl get-default 更改模式命令: systemctl set-default graphical.target由命令行模式更改为图形界面模式 systemctl set-default multi-user.target由图形界面模式更改为命令行模式 ``` 阅读全文

posted @ 2018-10-26 17:00 天生一对 阅读(4598) 评论(0) 推荐(0) 编辑

2018年10月25日

java操作Hbase

摘要: ``` public class Test { public Connection connection; // 用HBaseconfiguration初始化配置信息是会自动加载当前应用的classpath下的hbase site.xml public static Configuration co 阅读全文

posted @ 2018-10-25 11:13 天生一对 阅读(316) 评论(0) 推荐(0) 编辑

Linux 下安装 storm

摘要: 一:准备工作 (机器部署情况详见)这篇博客 3台安装supervisor,2台安装nimbus (1)安装jdk1.8 (2)安装zookeeper3.4.5 以上两部分安装可查看这篇博客 (3)下载Storm 1.2.2 下载连接 二:安装storm (1)解压缩 (2)修改目录conf/stor 阅读全文

posted @ 2018-10-25 11:11 天生一对 阅读(1865) 评论(0) 推荐(0) 编辑

导航