摘要：
UCloud Smart Data Platform（简称 USDP），是 UCloud 推出的智能化、轻量级、适用于私有化部署至客户本地的大数据基础服务平台，通过自研的 USDP Manager 管理工具，支持用户创建大数据集群，在集群中部署 Hadoop、Hive、HBase、Spark、Fli 阅读全文
posted @ 2023-07-19 19:18 天戈朱 阅读(261) 评论(0) 推荐(0) 编辑
摘要：
支持的Markdown语法 1 标题 2 # 一级标题 3 ## 二级标题 4 ### 三级标题 5 #### 四级标题 6 ##### 五级标题 7 ###### 六级标题 8 9 引用 10 > A man who stands for nothing will fall for anythin 阅读全文
posted @ 2023-04-25 10:39 天戈朱 阅读(162) 评论(0) 推荐(0) 编辑
摘要：
在国家质检总局发布的《特种设备目录》中，立体车库分为九大类，分别是： 升降横移 简易升降 垂直循环 水平循环 多层循环 平面移动 巷道堆垛 垂直升降 汽车专用升降 影响立体车库运营服务效率主要是控制系统软件部分的存取车调度策略算法,而用户排队时间与车库服务效率息息相关 巷道堆垛类型：根据泊车位的分布 阅读全文
posted @ 2023-04-06 15:44 天戈朱 阅读(370) 评论(0) 推荐(0) 编辑
摘要：
AllData 一站式大数据平台 github：https://github.com/alldatacenter/alldata 1、BitSail (数据集成) ： BitSail是字节跳动旗下引擎的数据集成引擎，于2022年10月26日正式开源，采用 Apache 2.0 开源许可。 BitSa 阅读全文
posted @ 2023-02-20 15:07 天戈朱 阅读(1226) 评论(0) 推荐(0) 编辑
摘要：
跨集群复制（CCR）功能支持将远程集群中的索引复制到本地集群。 可以在一些常见的生产用例中使用此功能： 灾难恢复（DR）/高可用性（HA）：如果主群集发生故障，则进行灾难恢复。 辅助群集可以用作热备份 地理位置优先：在 Elasticsearch 中复制数据以更接近用户或应用程序服务器，从而减少延迟 阅读全文
posted @ 2023-02-05 16:03 天戈朱 阅读(423) 评论(0) 推荐(0) 编辑
摘要：
跨集群搜索（cross-cluster search）使你可以针对一个或多个远程集群运行单个搜索请求。 例如，你可以使用跨集群搜索来筛选和分析存储在不同数据中心的集群中的日志数据。 示例 ：在一个集群里访问多个云厂商所提供的集群，并对跨数据的数据进行搜索，如下图： 如上面所述，当 client 向集 阅读全文
posted @ 2023-02-05 16:03 天戈朱 阅读(381) 评论(0) 推荐(0) 编辑
摘要：
为了能够实现 CCR(跨集群复制 Cross-cluster replication) 及 CCS(跨集群搜索 Cross-cluster search )，我们必须让集群之间能够互信，这样才可以建立集群之间的连接。以通过以下方式建立集群之间的互信。在用于执行跨集群搜索的集群（本地集群）和所有远程集 阅读全文
posted @ 2023-02-05 16:02 天戈朱 阅读(412) 评论(0) 推荐(0) 编辑
摘要：
数据量增长，当前存在的问题： 查询与写入越来越慢，聚合的速度慢的离谱，聚合的数据量大一些的话，可能出现超时失败，甚至OOM 磁盘和内存资源以肉眼可见的速度快速消耗，甚至出现满载的情况 JVM频繁GC，fullGC的频率逐渐变高，甚至由于GC卡顿导致系统不可用的情况发生 阶段一方案： 将索引按照某些条 阅读全文
posted @ 2023-02-05 16:02 天戈朱 阅读(48) 评论(0) 推荐(0) 编辑
摘要：
Monitoring是elastic stack的监控模块，监控信息存在es索引中，并且可以通过kibana进行可视化的展示。(收集监控数据的方式从6.5版本起由Collectors-Exporters模式逐步迁移到使用Metricbeat进行收集) 一、原理及源码结构 Monitor模块按组件分为 阅读全文
posted @ 2023-02-05 16:02 天戈朱 阅读(587) 评论(0) 推荐(0) 编辑