摘要： 配置Job History Server【Standalone】 进入到Spark安装目录 cd /opt/modules/spark-2.1.1-bin-hadoop2.7/conf 将spark-default.conf.template复制为spark-default.conf 修改spark 阅读全文

摘要： 二、 Spark集群安装 2.1 集群角色 从物理部署层面上来看，Spark主要分为两种类型的节点，Master节点和Worker节点，Master节点主要运行集群管理器的中心化部分，所承载的作用是分配Application到Worker节点，维护Worker节点，Driver，Applicatio 阅读全文

摘要： 今天又去打工了一天,又挣了200,明天开始接着学习Spark的知识 阅读全文

摘要： 今天我去打工了一天,挣了200块钱,spark学习暂停几天 阅读全文

摘要： 1.3 Spark的用户和用途我们大致把Spark的用例分为两类：数据科学应用和数据处理应用。也就对应的有两种人群：数据科学家和工程师。 数据科学任务 主要是数据分析领域，数据科学家要负责分析数据并建模，具备 SQL、统计、预测建模(机器学习)等方面的经验，以及一定的使用 Python、 Matla 阅读全文

摘要： 1.2 Spark特点 快 与Hadoop的MapReduce相比，Spark基于内存的运算要快100倍以上，基于硬盘的运算也要快10倍以上。Spark实现了高效的DAG执行引擎，可以通过基于内存来高效处理数据流。计算的中间结果是存在于内存中的。 易用 Spark支持Java、Python和Scal 阅读全文

摘要： 一、 Spark概述 1.1什么是Spark 官网：http://spark.apache.org Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache顶级项目。项目 阅读全文

摘要： 通过了2023下半年的软件设计师中级资格证的考试 阅读全文

摘要： 经过一个月的阅读，终于把《需求分析与系统设计》这本书读完了，其中对需求和对设计方面的知识对我帮助很大。书中作者对需求分析的思想对我也有很大的启示，在我现阶段的学习中对需求的了解有了进一步的认知。这一阶段我读了这本书的最后几章，在这几章中作者主要对系统的设计做了一定的分析，同时让我学到很多东西。 第七 阅读全文

摘要： 软件需求与分析课堂测试十一 销售订货管理系统是ERP的源头，如何管控销售订单下达、评审、跟进，不光是从软件上做约束管理，同时要从工作流程规定上做规范。 【开发目的】 规范公司订单下达、评审业务流程，提高客户订单准时交货率。 【适用范围】 适用于公司订单处理过程。 【术语定义】 无 【岗位职责】 4. 阅读全文