摘要：
Clickhouse 副本节点之间通过Zookeeper 的log数据和其他控制信息，实现了副本间数据的异步同步。本文中简单介绍插入数据后副本之间同步流程。 副本表Zookeeper目录结构 创建副本表，并插入数据，在Zookeeper上可以看到表目录下主要包含下列目录信息， ReplicatedM 阅读全文
posted @ 2022-03-22 09:56
华为云官方博客
阅读(729)
评论(0)
推荐(0)
摘要：
背景介绍 随着数据湖技术从离线向实时的发展，数据湖在业务已逐渐从辅助决策向实时决策，实时干预甚至提前预防的方向发展，同时，随着国家把数据作为第五种生产要素，数据据价值在逐步提升，这样对海量数据湖的可靠性提出了新的要求。 首先，数据湖作为企业全量数据存储的地方，对数据的安全性有着至关重要的作用，如何保 阅读全文
posted @ 2022-03-21 20:12
华为云官方博客
阅读(646)
评论(0)
推荐(0)
摘要：
1 前言 MRS CDL是华为云FusionInsight MRS推出的一种数据实时同步服务，旨在将传统OLTP数据库中的事件信息捕捉并实时推送到大数据产品中去，本文档会详细为大家介绍CDL的整体架构以及关键技术。 2 CDL的概念 MRS CDL（Change Data Loader）是一款基于K 阅读全文
posted @ 2022-03-21 16:02
华为云官方博客
阅读(1165)
评论(0)
推荐(0)
摘要：
本文将介绍如何在 Spark scala 程序中调用 Python 脚本，Spark java程序调用的过程也大体相同 1.PythonRunner 对于运行与 JVM 上的程序（即Scala、Java程序），Spark 提供了 PythonRunner 类。只需要调用PythonRunner 的m 阅读全文
posted @ 2022-03-21 14:40
华为云官方博客
阅读(240)
评论(0)
推荐(0)
摘要：
背景信息 CDN缓存命中率低，会导致源站压力大，静态资源访问效率低。您可以针对导致CDN缓存命中率低的具体原因，选择对应的优化策略，来提高CDN的缓存命中率。CDN缓存命中率包括流量命中率和请求命中率。 流量命中率 = 命中缓存产生的流量 / 请求总流量 **请求命中率 **= 命中缓存的请求数 / 阅读全文
posted @ 2022-03-18 15:20
华为云官方博客
阅读(487)
评论(0)
推荐(0)
摘要：
现在越来越多的行业使用OBS桶存储图片、视频、软件包等静态资源文件，并将OBS桶作为网站、论坛、APP、游戏等业务的存储源。在需要获取这些静态资源时，用户通过URL直接从OBS桶请求数据。OBS桶能够很好的解决本地存储不够用的难题，但一般情况下文件只存储在一个区域，不同区域的用户访问OBS桶的响应速 阅读全文
posted @ 2022-03-17 22:19
华为云官方博客
阅读(646)
评论(0)
推荐(0)
摘要：
Hash Join是在进行多表连接时常用的方式之一。那如何在openLooKeng上构建并实现Hash Join？openLooKeng支持的Join类型有哪些？本期，社区小伙伴将分享[openLooKeng Hash Join 实现原理]，从构建到使用，内容十分详细，希望对大家有帮助。 1 ope 阅读全文
posted @ 2022-03-17 15:05
华为云官方博客
阅读(199)
评论(0)
推荐(0)
摘要：
作者经历了多次基于HBase实现全量与增量数据的迁移测试，总结了在使用HBase进行数据迁移的多种实践，本文针对全量与增量数据迁移的场景不同，提供了1+2的技巧分享。 HBase全量与增量数据迁移的方法 1.背景 在HBase使用过程中，使用的HBase集群经常会因为某些原因需要数据迁移。大多数情况 阅读全文
posted @ 2022-03-17 14:54
华为云官方博客
阅读(991)
评论(0)
推荐(1)
摘要：
这两年，视频会议从疫情环境下的被迫选择，到全面复工后的不降反增，再到现在已成为常态化办公方式，视频会议软件也从疫情期间的免费开放使用，到现在需要购买会员才能解锁更多功能。一款好的视频会议软件当然可以起到事半功倍的效果，但如果没选对，很有可能花了钱还多了麻烦。那么问题来了，如何在这么多视频会议软件中选 阅读全文
posted @ 2022-03-17 08:14
华为云官方博客
阅读(760)
评论(0)
推荐(0)
摘要：
一、 静态分区 1.创建静态分区格式: create table employees ( name string, salary float, subordinated array<string>, deductions map<string,float>, address struct<stree 阅读全文
posted @ 2022-03-15 20:17
华为云官方博客
阅读(258)
评论(0)
推荐(0)
浙公网安备 33010602011771号