随笔分类 - 华为云新鲜技术分享
最新的技术交流与分享，尽在华为云开发者社区
摘要：摘要：为了解决现阶段大数据存算分离痛点问题，华为云大数据推出重量级数据湖Catalog服务。 1 背景 随着5G、IoT等技术的发展，企业积累了越来越多的数据，需要激发更多的数据价值变现。传统大数据平台从建设到落地的长周期，不利于业务的高速发展；平台建成后，维护、升级、扩容均以集群为单位，管理离散，
阅读全文
摘要：摘要：今天教大家如何利用鲲鹏服务器搭建Hadoop全分布式集群，动起来··· 一、Hadoop常见的三种运行模式 1、单机模式（独立模式）（Local或Standalone Mode） 默认情况下Hadoop就是处于该模式，用于开发和调式。不对配置文件进行修改。使用本地文件系统，而不是分布式文件系统
阅读全文
摘要：摘要：协议兼容问题、性能问题、数据备份问题、数据容量问题……这些都是数据库在使用过程中必然会遇见的问题。就好比选择结婚对象，你需要去对比不同的方面，最后选出最好的、最合适的。 近期全国两会正在轰轰烈烈的召开，各人大代表也基于自己的一些实践提出了自己的意见，例如“出台手机设备适老标准”、“老师奖励不与
阅读全文
摘要：摘要：GaussDB（for Influx）提供了独特的数据存储管理解决方案，云原生的存储与计算架构，可根据业务变化快速扩容缩容；高效的数据压缩能力和数据冷热分离设计，可大幅降低数据存储成本；高吞吐的集群，可满足大规模运维监控和物联网场景海量数据写入和查询性能要求。 前言 随着云计算规模越来越大，以
阅读全文
摘要：摘要：数据加密作为有效防止未授权访问和防护数据泄露的技术，在各种信息系统中广泛使用。作为信息系统的核心，GaussDB(DWS)数仓也提供数据加密功能，包括透明加密和使用SQL函数加密。 数据泄露防护 数据作为信息系统中的核心资产，其机密性、完整性和可用性必须得到保证，以避免数据被非法泄漏或非法篡改
阅读全文
摘要：摘要：探讨常见的Feed流系统包含的概念、架构和挑战以及如何使用高斯Redis设计一个Feed流系统。 一、背景 GaussDB(for Redis)（下文简称高斯Redis），是华为自研的强一致、持久化NoSQL数据库，兼容Redis5.0协议。 在互联网时代，我们日常生活充斥着Feed流，微信朋
阅读全文
摘要：摘要：在GaussDB(DWS)中，VACUUM的本质就是一个“吸尘器”，用于吸收“尘埃”。 下面将从VACUUM的作用、用法、原理等方面进行介绍。 在GaussDB(DWS)中，VACUUM的本质就是一个“吸尘器”，用于吸收“尘埃”。而尘埃其实就是旧版本数据，如果这些数据没有及时清理，那么将会导致
阅读全文
摘要：摘要：本文讲述的是MindSpore对篮球运动员目标的检测应用，通过AI技术辅助对篮球赛场进行分析。 本文分享自华为云社区《MindSpore大V博文系列：AI对篮球运动员目标的检测》，原文作者：李锐锋。 MindSpore作为一个端边云协同的开源的全场景AI框架，今年3月份开源以来，受到了发展中国
阅读全文
摘要：摘要：IAP是利用自己的程序代码实现升级程序（新的APP）从外部接口（可以是串口、I2C、SPI、网口等等）写入到flash中，再通过flash读写操作，将新的APP覆盖原有APP程序，在重新从新的APP入口位置启动我们的应用程序，同时也负责IAP代码的修改和迭代。 现在升级已经成为IoT领域边缘升
阅读全文
摘要：摘要：基于深度学习的端到端通信系统模型可以分为两类：确定信道模型与未知信道模型。 现代的通信领域是基于信号处理算法建立起来的，其有比较完整的统计学和信息论基础，并可以被证明是最优的。这些算法通常是线性的、稳定的，并拥有高斯统计特性。 但是，一个实际的通信系统，大部分模块都是非线性的，只能被这些算法近
阅读全文
摘要：摘要：云原生数据库，实现多云协同、混合云解决方案、边云协同等能力的数据库。 Gartner预测，2021年云数据库在整个数据库市场中的占比将首次达到50%；2023年75%的数据库将基于云的技术来构建并跑在云平台之上。 云数据库蓬勃发展的同时，云原生数据库的理念也被市场和各大云厂商所认可。云原生数据
阅读全文
摘要：摘要：我们在使用编译器在编译工程后会要求生成可执行文件，将这些文件烧录到MCU进行运行，达到我们测试和使用程序的目的，再使用工具链进行编译的时候往往生成.bin、.hex 、.elf 、.alf等文件，这些文件有什么区别呢？可以互相转换吗？LiteOS 有哪些可执行文件呢？本文意义进行阐述。 我们在
阅读全文
摘要：摘要：本文带领大家一起剖析了LiteOS位操作模块的源代码，代码非常简单，参考官方示例程序代码，实际编译运行一下，加深理解。 在进一步分析之前，本文我们先来熟悉下LiteOS提供的辅助功能模块–位操作，在互斥锁等模块对位操作有使用。位操作是指对二进制数的bit位进行操作。程序可以设置某一变量为状态字
阅读全文
摘要：摘要：通过引入资源监控和控制等手段，实现资源在可控的情况下被合理利用的目的，避免出现资源的无序使用，防止数据库系统性能变慢、停止响应。 1 资源管理是什么？ 1.1 资源管理简介 通过引入资源监控和控制等手段，实现资源在可控的情况下被合理利用的目的，避免出现资源的无序使用，防止数据库系统性能变慢、停
阅读全文
摘要：摘要：Huawei LiteOS的时间管理模块以系统时钟为基础，分为2部分，一部分是SysTick中断，为任务调度提供必要的时钟节拍；另外一部分是，给应用程序提供所有和时间有关的服务，如时间转换、统计、延迟功能。 本文分享自华为云社区《LiteOS内核源码分析系列四 LiteOS内核源码分析--时间
阅读全文
摘要：摘要：对于一个合格的CloudNative应用，应该把自己的程序当做开源软件来编写的，不该将数据库连接信息和密码放在代码里，一定要将配置外置。 对于一个合格的CloudNative应用，应该把自己的程序当做开源软件来编写的，不该将数据库连接信息和密码放在代码里，一定要将配置外置。 因此我试着在华为云
阅读全文
摘要：摘要：本文从总体架构、主打场景、关键技术特性等方面进行介绍GaussDB(for openGauss)。 1.背景介绍 3月16日，在华为云主办的GaussDB(for openGauss)系列技术第一期直播课《认识华为云数据库 GaussDB(for openGauss) 》上，有这样一个提问：开
阅读全文
摘要：摘要：随着电子商务迅速发展，各个行业巨头纷纷投入互联网+的怀抱，钢铁行业作为典型的传统行业，如何实现华丽转身，拥抱市场，加快产业新旧动能转换？ 本文分享自华为云社区《化蛹成蝶，华为云DevCloud助力互联网+转型，重构钢铁产业链》，原文作者：灰灰哒 。 随着电子商务迅速发展，各个行业巨头纷纷投入互
阅读全文
摘要：摘要：大规模分布式系统中的故障无法避免。发生单点故障时，集群状态和业务是如何恢复的？ 本文分享自华为云社区《GaussDB (DWS) 集群管理系列：单节点故障RTO机制分析（集群状态恢复篇）》，原文作者：CloudGanker 。 一、前言 GaussDB(DWS)产品采用分布式架构设计。集群管理
阅读全文
摘要：摘要：揭秘高斯 Redis 在IM场景中的应用。 本文分享自华为云社区《华为云PB级数据库GaussDB(for Redis)揭秘第五期：高斯 Redis 在IM场景中的应用》，原文作者：心机胖 。 一、背景 即时通讯（Instant Messaging，简称IM）是一个实时通信系统，允许两人或多人
阅读全文
浙公网安备 33010602011771号