前言 近年来，国产数据库越来越流行了，其中的原因大家也都知道。其中，我接触过的一款数据库就是达梦数据库。这个数据库的使用还是挺方便的。我知道最近有越来越多的小伙伴要开始国产化改造了，所以，对于达梦数据库这样的国产数据库，肯定想要了解很多知识的。所以，今天就来聊聊如何在windows上安装达梦数据库。 ...

[20241105]跟踪library cache lock library cache pin使用gdb(11g)2.txt--//前一段时间写的使用gdb跟踪library cache lock/library cache pin的脚本。--//我看过以前的笔记，当时测试过链接https://n ...

创建临时表，一部分为了优化查询，join在临时表里查询出结果后导入到正常表中，他也支持多session的查询优化，更重要一点是在session会话关闭后，临时表会自动销毁。嗯就这样 另外分清他和内存表的区别 内存表一定是从memory引擎创建的，临时表可以由memory引擎创建 ...

写在前面 今天来学习hive部分的知识。 Hive 相关概念 Hive是什么？ Apache Hive 是一个基于 Hadoop 的数据仓库工具，旨在通过 SQL 类似的查询语言（称为 HiveQL）来实现对存储在 HDFS（Hadoop Distributed File System）中的大规模数 ...

MySQL 8.0 执行COUNT()很慢原因分析 1.1 问题描述 线上 MySQL8.0.32 环境在执行 SELECT COUNT (1) FROM t0 获取表行数很慢，同样场景下该 SQL 在 MySQL5.7 环境很快就能拿到结果 1.2 问题复现 测试版本：8.0.25 MySQL C ...

写在前面 今天继续学习hadoop部分的知识。 MapReduce 数据切片 InputFormat 接口 InputFormat 是一个抽象类，定义了两个方法： getSplits：负责实现数据切片的方法 createRecordReader：实现数据的 key-value 格式。 FileInp ...

本文介绍了在Apache DolphinScheduler中嵌入Arthas的方法，以实现对接口调用的监控。Arthas是一款强大的 Java诊断工具，能够帮助开发者实时查看应用程序的运行状态、性能瓶颈和方法调用情况。在DolphinScheduler中集成Arthas，可以方便地捕获任务调度时的关 ...

本文介绍了如何使用SeaTunnel将数据从InfluxDB同步到Doris。通过SeaTunnel强大的数据集成功能，用户可以高效地将存储于InfluxDB中的时间序列数据传输至Doris，便于数据的访问与分析。 版本信息： SeaTunnel 2.3.3 InfluxDB 2.7.6 Doris ...

10月30日，袋鼠云成功举办了以“AI驱动，数智未来”为主题的2024年秋季发布会。大会深度探讨了如何凭借 AI 实现新的飞跃，重塑企业的经营管理方式，加速数智化进程。 会上，易知微产品经理林树为大家带来了一款新产品——多层级数据填报与报送平台TableFill。TableFill是一款一站式表单填 ...

1. 合作角色 1.1. 数据分析师 1.2. 数据科学家 1.3. MLOps/机器学习工程师 1.4. 业务侧 1.4.1. 数据或非技术的利益相关者、经理和高管 1.5. 数据工程师更多的是在支持这些利益相关者的工作，不一定对数据的最终使用方式负责 1.6. 数据工程师负责的是产出高质量的数据 ...

第三十四讲：join语句怎么优化？ 简概： 万年不变的开头 ​ 在上一篇文章中，我和你介绍了 join 语句的两种算法，分别是 Index Nested-Loop Join(NLJ) 和 Block Nested-Loop Join(BNL)。我们发现在使用 NLJ 算法的时候，其实效果还是不错的， ...

10月30日，袋鼠云成功举办了以“AI驱动，数智未来”为主题的2024年秋季发布会。大会深度探讨了如何凭借 AI 实现新的飞跃，重塑企业的经营管理方式，加速数智化进程。 作为大会的重要环节之一，袋鼠云数栈产品经理潮汐带来了题为《指标+AI+BI：构建数据分析新范式》的精彩演讲，深入剖析了当前企业在进 ...

1. 使用场景 1.1. 为分析和BI，也就是统计分析、报表和仪表板提供数据服务 1.1.1. 是数据服务最为常见的目标 1.1.2. 这些概念的提出早于IT和数据库，但是它们对于了解业务、组织和财务流程的利益相关者来说仍然至关重要 1.2. 为机器学习应用程序提供数据服务 1.2.1. 机器学习完 ...

第三十三讲：到底可不可以使用join？ 简概： 厌烦了平淡的开头 提出问题 ​ 在实际生产中，关于 join 语句使用的问题，一般会集中在以下两类： 我们 DBA 不让使用 join，使用 join 有什么问题呢？ 如果有两个大小不同的表做 join，应该用哪个表做驱动表呢？ 提出示例 ​ 今天这篇 ...

MySQL--DAY04 索引 定义 索引是在数据库表的字段上添加的，是为了提高查询效率存在的一种机制。 一张表的一个字段可以添加一个索引，当然，多个字段联合起来也可以添加索引。 索引相当于一本书的目录，是为了缩小扫描范围而存在的一种机制。 对于一本字典来说，查找某个汉字有两种方式： 第一种方式：一 ...

Apache SeaTunnel作为一款高效的数据集成和同步工具，一直活跃于大数据领域。Milvus作为全球领先的开源向量数据库，致力于推动向量数据管理和AI的应用。 在最新版本中，SeaTunnel Connector已正式支持向量数据库Milvus，这是SeaTunnel在助力用户提升AI应用开 ...

需求：编写程序利用Spark Streaming 监控HDFS 目录/input目录下的文件，并对上传的文件进行词频统计。 首先，linux中需要有netcat，来实现监听功能，有的linux会自带这个软件，可以用下面的命令测试一下，如果不报错就没问题，Ctrl+z可以退出 nc -l 9999 没 ...

1. 转换 1.1. 转换与查询不同 1.1.1. 查询是根据过滤和连接逻辑从各种来源检索数据 1.1.2. 转换将结果持久化，供其他转换或查询使用 1.1.2.1. 结果可以被短暂地或永久地保存 1.1.3. 除了持久性，转换区别于查询的另一个特点是复杂性 1.1.3.1. 你可能会建立复杂的数据 ...

MySQL--DAY03 一个案例 查询每一个员工的所在部门名称？要求显示员工名和部门名。 mysql> select * from emp; + + + + + + + + + | EMPNO | ENAME | JOB | MGR | HIREDATE | SAL | COMM | DEPTNO ...

MySQL--DAY01 基本概念 数据库：英文单词DataBase，简称DB。按照一定格式存储数据的一些文件的组合。 顾名思义：存储数据的仓库，实际上就是一堆文件。这些文件中存储了具有特定格式的数据。 数据库管理系统：DataBaseManagement，简称DBMS。 数据库管理系统是专门用来管 ...