lomook

摘要： Structured Streaming 核心概念（实时处理新世界） 流式计算基础概念 scala import org.apache.spark.sql.streaming.{OutputMode, Trigger, StreamingQuery} import org.apache.spark. 阅读全文

摘要： Spark SQL核心概念（新大陆！） SparkSession - 统一的入口点 scala import org.apache.spark.sql.SparkSession // 创建SparkSession（不再需要单独创建SparkContext） val spark = SparkSess 阅读全文

摘要： Key-Value RDD操作（重点突破） 常用Pair RDD转换操作： scala // 准备数据 val rdd = sc.parallelize(Seq( ("apple", 3), ("banana", 2), ("apple", 5), ("orange", 1), ("banana", 阅读全文

摘要： Spark运行模式（重点掌握） Local模式：本地单机运行，用于测试和开发 特点：所有组件都在单个JVM进程中运行 命令：./bin/spark-shell --master local[*] Standalone模式：Spark自带的集群管理器 架构：Master + Worker节点 适用：中 阅读全文

摘要： 一、今日核心任务：理解提示词工程 我将今日的学习聚焦在一个明确的点上：如何通过优化提示词来与大模型更高效地协作。 二、关键进展与收获 认知突破： 大模型的核心机制：更深刻地理解了其“基于概率的序列生成”本质。它不是“懂得”，而是在根据我的输入（提示词）所提供的上下文，计算下一个最可能出现的词。 提示 阅读全文

摘要： 配置 Hadoop 的实践体会：踩坑、理解与沉淀 配置 Hadoop 是入门大数据的第一道 “门槛”，整个过程不仅是对技术参数的调试，更是对分布式系统核心思想的具象化理解。从最初的手忙脚乱踩坑，到最终集群正常运行，既有挫败感，也有对分布式架构的通透感，以下是具体的体会和总结： 一、前期准备：细节决定 阅读全文

摘要： 马上六级考试了，自己找了往年的真题进行了测试，结果不尽人意，不过好在还有几天时间，自己可以充分利用这几天对听力部分以及阅读部分进行训练 阅读全文

摘要： 马上要考数据库原理及应用了，为此我进行了系统性复习，将第三章到第六章与sql语句相关的需要背的东西搜集了出来，方便自己复习。除此之外，还有计算机网络这一科目也是临近考试，对此我也需要进行进一步的复习 第三章 10.写出创建如下三张表的sql语句，要求在定义表的同时定义数据的完整性约束 （1）“图书” 阅读全文

摘要： 在运行java项目时，经常会遇到下面这种错误，，对此错误分析 java.lang.IllegalArgumentException: Invalid value type for attribute 'factoryBeanObjectType': java.lang.String 这个错误通常发生 阅读全文

摘要： 今天通过上网完成了对node.js的配置 重新安装 Node.js（推荐方案） 确保 Node.js 正确安装并配置环境变量： 卸载现有 Node.js： 通过 控制面板 > 程序和功能 卸载 Node.js 和 npm。 下载最新 LTS 版本： 从 Node.js 官网 下载 LTS 版本（如 阅读全文