摘要:前面我们为大家介绍了 Azure Blob 文件索引检索查询 的几个典型场景,本文为大家来介绍一下 RedisSearch 的方案实现。我们来回顾一下架构图,该方案中选择 RedisSearch 作为索引数据查询引擎作为示例,用户也可以采用相同的架构使用 ElasticSearch 进行搭建。顺便口 阅读全文
posted @ 2020-11-18 15:40 wekang 阅读(14) 评论(0) 推荐(0) 编辑
摘要:前面我们为大家介绍了 Azure Blob 文件索引检索查询 的几个典型场景,本文为大家来介绍一下 Azure Blob Indexing 的方案实现。我们来回顾一下架构图,在 Azure Blob 中原生提供了 Blob Indexing 功能,支持典型的 Key Value 检索查询,如果用户对 阅读全文
posted @ 2020-11-18 15:08 wekang 阅读(15) 评论(0) 推荐(0) 编辑
摘要:大家好,最近在跟客户/同事讨论中聊到关于如何对 Azure Blob (Azure Data Lake)中海量的对象存储数据进行检索查询,今天我们就来聊一聊如何对 Blob 数据进行文件索引检索查询。云对象存储的出现,其灵活的弹性和可扩展性,以及卓越的性价比,促使越来越多的场景开始使用云对象存储解决 阅读全文
posted @ 2020-11-18 14:31 wekang 阅读(16) 评论(0) 推荐(0) 编辑
摘要:应广大看官要求,今天为大家介绍如何在 Azure 上搭建 DMZ 区域。为什么讲这个话题,安全无小事,很多用户在上云的时候并没有做好安全的前期规划导致后期埋下了安全隐患。为什么专挑 DMZ 网络安全设计讲,要想富先修路,在云端跟 IDC 相同,要想富先修路,网络先行,同时 DMZ 区域是整个网络安全 阅读全文
posted @ 2020-08-07 05:52 wekang 阅读(186) 评论(0) 推荐(0) 编辑
摘要:前四篇文章带大家通过 Azure Synapse Analysis 服务的内置的 ETL 能力,实现了上游 CosmosDB 内的 Transaction 数据的增量数据(CDC)推送至下游的数据仓库内。通过 Azure Synapse Analysis 类似的方式,我们可以针对不同上游数据系统 C 阅读全文
posted @ 2020-08-05 15:42 wekang 阅读(34) 评论(0) 推荐(0) 编辑
摘要:上一篇我们介绍到通过 Date Warehouse T-SQL Script 来实现 CDC 数据的 ETL 和 Update,本篇 Blog 带大家通过 Data Factory 工具将该数据处理水线实现自动话,大体思路是将前面的 Data Warehouse ETL 和 Update 通过存储过 阅读全文
posted @ 2020-07-13 23:09 wekang 阅读(66) 评论(0) 推荐(0) 编辑
摘要:前一篇 Blog 中我们完成了通过 Azure Function 完了从上游 Cosmos DB ChangeFeed 数据的抽取并转存至 Azure Data Lake 中。回顾一下整个演示方案架构,后续我们需要在 Azure Data Warehouse 中拉入增量数据 CDC(Change D 阅读全文
posted @ 2020-07-13 18:17 wekang 阅读(80) 评论(0) 推荐(0) 编辑
摘要:继续上一篇的内容,本文将为大家介绍将 ChangeFeed 抽取逻辑通过 Azure Function 服务实现,架构图如下,通过 Function 服务来执行 ChangeFeed 的读取,并将其转存至 DataLake 存储中。 在前文最后我们介绍了通过 Function 服务可以简化整个逻辑的 阅读全文
posted @ 2020-07-13 14:40 wekang 阅读(77) 评论(0) 推荐(0) 编辑
摘要:上一篇为大家整体介绍了 Azure Synapse Analysis 和 Synapse Link,本篇开始为大家介绍前面介绍的 DIY 方案中的第一部分,Cosmos DB Change Feed。我们来回顾一下整个架构: 对 OLTP 中的数据向下游数据服务进行同步时通常有两种做法,全量同步和增 阅读全文
posted @ 2020-07-13 11:17 wekang 阅读(98) 评论(0) 推荐(0) 编辑
摘要:当今企业数字化转型,企业从传统的历史数据洞察获取认知,到实时数据洞察认知,再到未来预测洞察,AI + Data 是重要的两架马车。巧妇难为无米之炊,如何简单及时的从数据中获得洞察支撑决策?简单,是否有易用快捷的平台可以快速发现数据,分析数据并展现数据。及时,时间是试错成本的重要因子,是否有平台方案帮 阅读全文
posted @ 2020-07-13 09:37 wekang 阅读(111) 评论(0) 推荐(0) 编辑