元始天尊123 - 博客园

2025年10月27日

摘要：使用 ADO.NET 读取和写入数据如果说前一篇是“地基”，那这一篇就是 C# 从 UI 走向真实系统的分水岭。一、Java 程序员视角看 C# 数据库访问你可能最关心的是： C# 连数据库，是不是 JDBC 那一套？答案是：是的，思想 100% 一样 JDBC vs ADO.NET 对阅读全文

posted @ 2025-10-27 21:19 元始天尊123 阅读(5) 评论(0) 推荐(0)

进销存系统第一个模块：商品信息管理的实现

摘要：进销存系统第一个模块：商品信息管理的实现一、什么是“业务模块”？在前面几篇中，我们已经完成了：数据库表设计 C# 连接数据库查询、插入数据但这些仍然是技术准备阶段。业务模块的定义是：能被用户感知、能解决实际问题的一整套功能。在进销存系统中，第一个必须存在的模块是：商品信息管理二、阅读全文

posted @ 2025-10-27 21:19 元始天尊123 阅读(8) 评论(0) 推荐(0)

2025年10月26日

Sqoop 安装与测试

摘要： Sqoop 安装与测试 Demo（MySQL → HDFS）本文通过一个完整 Demo，演示 Sqoop 的安装、配置以及从 MySQL 导入数据到 HDFS 的全过程。一、实验环境说明组件版本 OS Linux / 虚拟机 Hadoop 3.x MySQL 8.x Sqoop 1.4.7 阅读全文

posted @ 2025-10-26 19:30 元始天尊123 阅读(5) 评论(0) 推荐(0)

Sqoop在大数据体系中的作用

摘要： Sqoop 是什么？以及它在大数据体系中的作用一、为什么要学习 Sqoop？在实际的大数据系统中，数据并不只存在于 Hadoop 生态内部。业务数据往往存储在关系型数据库（如 MySQL、Oracle）分析计算往往发生在 HDFS / Hive / HBase Sqoop 的核心作用：解阅读全文

posted @ 2025-10-26 19:30 元始天尊123 阅读(3) 评论(0) 推荐(0)

从零开始学 C#：开发环境搭建与第一个窗口程序

摘要：从零开始学 C#：开发环境搭建与第一个窗口程序一、为什么从“窗口程序”开始学 C# 对于初学者来说，直接从控制台程序学习 C# 语法虽然简单，但缺乏直观反馈，很难理解“程序是怎么被用户使用的”。而进销存系统本质上是一个带界面的业务系统，最终一定需要：输入框录入数据按钮触发操作窗口展示结果阅读全文

posted @ 2025-10-26 19:30 元始天尊123 阅读(3) 评论(0) 推荐(0)

2025年10月24日

Hive 中的 Join 原理与优化策略

摘要： Hive 中的 Join 原理与优化策略从执行机制到 Map Join 实战一、为什么 Join 是 Hive 中的性能瓶颈在 Hive 的实际使用过程中，大部分性能问题都集中在 Join 操作上。原因在于： Join 通常会触发 Reduce 阶段数据需要进行 Shuffle，网络开销大阅读全文

posted @ 2025-10-24 10:12 元始天尊123 阅读(6) 评论(0) 推荐(0)

Hive 在大数据分析中的角色

摘要： Hive 在大数据分析中的角色为什么 Hive 不是万能的一、为什么容易“高估” Hive 在初学大数据时，Hive 往往是第一个接触到的分析工具。由于其 SQL 语法简单、上手快，很多人会误认为：只要有 Hive，就可以完成所有数据处理任务。这种理解在实际项目中往往会导致错误的技术选型。阅读全文

posted @ 2025-10-24 10:11 元始天尊123 阅读(8) 评论(0) 推荐(0)

基于 Hive 的用户评论词频统计实战

摘要：基于 Hive 的用户评论词频统计实战结合 Python 分词与 Hive 数据分析的完整流程一、案例背景与分析目标在互联网应用中，用户评论数据通常以非结构化文本形式存在。通过对评论内容进行分词和词频统计，可以实现：用户关注点分析热点关键词挖掘情感分析前置处理本案例采用 Python 阅读全文

posted @ 2025-10-24 10:11 元始天尊123 阅读(5) 评论(0) 推荐(0)

Hive 查询性能优化实战

摘要： Hive 查询性能优化实战从 SQL 编写到参数调优的完整思路一、Hive 查询慢的根本原因 Hive 查询慢，通常不是 SQL 写错，而是由于：扫描数据量过大不合理的表结构设计 Join 和 Group By 使用不当参数配置不合理 Hive 性能优化必须从多个层面综合考虑。二、SQL 阅读全文

posted @ 2025-10-24 10:11 元始天尊123 阅读(4) 评论(0) 推荐(0)

2025年10月22日

Hive 表设计与数据建模

摘要： Hive 表设计与数据建模 Hive 数据仓库中的表类型与建模思想一、为什么 Hive 表设计很重要在 Hive 中，SQL 本身并不复杂，真正决定查询效率和系统稳定性的，往往是表设计与数据建模方式。不合理的表结构，会直接导致：查询扫描数据量过大 MapReduce 任务执行时间过长小文阅读全文

posted @ 2025-10-22 08:10 元始天尊123 阅读(6) 评论(0) 推荐(0)

yuanshitianzun123

公告