摘要： 软件架构师的核心工作逻辑：从问题识别到架构落地 作为软件领域的核心角色，软件架构师并非单纯的技术专家，也不是脱离实际的方案设计者，而是站在业务与技术的交叉点，以架构思维解决人的问题、平衡利益关系、推动系统高效落地的统筹者。王概凯老师的架构漫谈九篇系列，从架构的本质出发，层层拆解了软件架构师的工作内核 阅读全文

摘要： 本次实验是《Spark 编程基础（Scala 版）》中面向实时流数据处理的核心实操实验，围绕 Spark Streaming 的实时数据处理能力展开，结合日志采集工具 Flume 完成了环境搭建、数据源测试和实时流数据对接三大核心任务，掌握了 Flume 的安装配置方法以及 Flume 作为 Spa 阅读全文

摘要： 本次实验是《Spark 编程基础（Scala 版）》中从 RDD 编程过渡到结构化数据处理的核心实操实验，围绕 Spark SQL 的核心组件 DataFrame 展开，完成了 JSON 数据的 DataFrame 基础操作、RDD 到 DataFrame 的转换、DataFrame 与 MySQL 阅读全文

摘要： 本次实验是《Spark 编程基础（Scala 版）》核心的 Spark 编程实操实验，围绕 Spark 的核心抽象 RDD（弹性分布式数据集） 展开，通过spark-shell交互式编程、独立应用程序开发两种方式，完成成绩统计、数据去重、求平均值三类实际问题的解决，熟练掌握了 RDD 的基本转换、行 阅读全文

摘要： 本次实验是《Spark 编程基础（Scala 版）》从基础编程过渡到大数据框架实操的关键实验，围绕 Ubuntu16.04 环境下 Hadoop 和 Spark 的安装部署、HDFS 基础操作以及 Spark 访问文件系统数据展开，掌握了大数据核心框架的基础搭建方法和实操技能，为后续 Spark 核 阅读全文

摘要： 本次实验是《Spark 编程基础（Scala 版）》的核心初级实操实验，围绕 Scala 语言的基础语法、面向对象、函数式编程三大核心特性展开，通过级数计算、模拟图形绘制、学生成绩统计三个实操案例，掌握 Scala 的 REPL 运行模式、编译运行方法，以及容器类、特质、自定义类的实际应用，为后续 阅读全文

摘要： 一、实验知识总结 本次实验围绕 Linux 系统搭建与基础操作展开，核心是掌握 Windows 环境下 Linux 虚拟机的搭建方法、Linux 常用命令的实操以及跨系统文件传输技巧，为后续 Spark、Hadoop 等大数据软件的学习和使用奠定 Linux 环境基础，核心知识要点梳理如下： （一） 阅读全文

摘要： 1.模式动机与定义 模式动机 电视机 <——> 存储电视频道的集合 <——> 聚合类(Aggregate Classes) 电视机遥控器 <——> 操作电视频道 <——>迭代器(lterator) 访问一个聚合对象中的元素但又不需要暴露它的内部结构 <——> 迭代器模式 在迭代器模式中，提供一个外部 阅读全文

摘要： 1.模式动机与定义 模式动机 Java语言无法直接解释类似“1+2+3-4+1”这样的字符串 定义一套文法规则来实现对这些语句的解释，即设计一个自定义语言 基于现有的编程语言 → 面向对象编程语言 → 解释器模式 模式定义 解释器模式(Interpreter Pattern):定义一个语言的文法，并 阅读全文

摘要： 1.模式动机与定义 模式动机 按钮 ← → 请求发送者 事件处理类 ← →请求的最终接收者和处理者 发送者与接收者之间引入了新的命令对象(类似电线)，将发送者的请求封装在命令对象中，再通过命令对象来调用接收者的方法 相同的按钮可以对应不同的事件处理类 模式定义 命令模式(Command Patter 阅读全文