底层架构
摘要：
一：角色分类 （1）Coordinator 协调器: 协调器服务监视数据服务器上的历史服务。他们负责将区段分配给特定服务器，并确保区段在历史服务器之间保持良好的平衡。 （2）Overlord： 控制数据摄入任务的分配，Overlord 服务监视数据服务器上的 MiddleManager 服务，并且是 阅读全文
posted @ 2024-05-03 12:29 天生一对 阅读(93) 评论(0) 推荐(0) 编辑
数据摄取
摘要：
一：使用sql加载外部文件（http） REPLACE INTO "wikipedia" OVERWRITE ALL WITH ext AS (SELECT * FROM TABLE( EXTERN( '{"type":"http","uris":["https://druid.apache.org 阅读全文
posted @ 2024-05-03 09:38 天生一对 阅读(4) 评论(0) 推荐(0) 编辑
apache druid 初识
摘要：
一：Apache druid 是一种实时分析数据库，设计用于对大型数据集进行快速分析(OLAP)，支持数据的实时摄取，提供低时延的查询性能。 二：Apache druid 主要特点 （1）列式存储格式，查询时只加载特定查询的列，还根据数据类型优化每一列的存储，加快查询速度。 （2）可扩展的分布式系统 阅读全文
posted @ 2024-05-03 09:11 天生一对 阅读(50) 评论(0) 推荐(0) 编辑
IPV6
摘要：
``` import java.util.Objects; public class Ipv6 implements Comparable{ private Long first; private Long second; public Ipv6(Long left, Long right) { t 阅读全文
posted @ 2019-11-19 17:00 天生一对 阅读(234) 评论(0) 推荐(0) 编辑
java8 instant localDateTime
摘要：
 阅读全文
posted @ 2019-10-18 09:33 天生一对 阅读(799) 评论(0) 推荐(0) 编辑
FileInputFormat 的实现之TextInputFormat
摘要：
说明 TextInputFormat默认是按行切分记录record，本篇在于理解，对于同一条记录record，如果被切分在不同的split时是怎么处理的。首先getSplits是在逻辑上划分，并没有物理切分，也就是只是记录每个split从文件的个位置读到哪个位置，文件还是一个整体。所以在LineRe 阅读全文
posted @ 2019-07-30 10:07 天生一对 阅读(1472) 评论(0) 推荐(0) 编辑
Git服务器，仓库的hook监控
摘要：
简单应用场景：代码提交到git仓库，仓库监控到变化的jar包，然后把变化的jar包推到私服maven仓库。 Git预定义了触发时机： ClientSide hooks： 1 pre commit，当执行commit动作时先执行此hook，可以用此hook做一些检查，比如代码风格检查，或者先跑测试。 阅读全文
posted @ 2018-11-08 20:23 天生一对 阅读(1994) 评论(0) 推荐(0) 编辑
Linux 开机启动图形界面，shell界面
摘要：
```
查看当前启动模式 # systemctl get-default 更改模式命令：
systemctl set-default graphical.target由命令行模式更改为图形界面模式
systemctl set-default multi-user.target由图形界面模式更改为命令行模式
``` 阅读全文
posted @ 2018-10-26 17:00 天生一对 阅读(4599) 评论(0) 推荐(0) 编辑
java操作Hbase
摘要：
``` public class Test { public Connection connection; // 用HBaseconfiguration初始化配置信息是会自动加载当前应用的classpath下的hbase site.xml public static Configuration co 阅读全文
posted @ 2018-10-25 11:13 天生一对 阅读(316) 评论(0) 推荐(0) 编辑
Linux 下安装 storm
摘要：
一：准备工作 （机器部署情况详见）这篇博客 3台安装supervisor，2台安装nimbus （1）安装jdk1.8 （2）安装zookeeper3.4.5 以上两部分安装可查看这篇博客 （3）下载Storm 1.2.2 下载连接 二：安装storm （1）解压缩 （2）修改目录conf/stor 阅读全文
posted @ 2018-10-25 11:11 天生一对 阅读(1868) 评论(0) 推荐(0) 编辑
