随笔分类 -  spark

再谈spark部署搭建和企业级项目接轨的入门经验(博主推荐)
摘要:进入我这篇博客的博友们,相信你们具备有一定的spark学习基础和实践了。 先给大家来梳理下。spark的运行模式和常用的standalone、yarn部署。这里不多赘述,自行点击去扩展。 1、Spark运行模式概述 2、Spark standalone模式的安装(spark-1.6.1-bin-ha 阅读全文

posted @ 2018-06-01 18:31 Hi,王松柏 阅读(314) 评论(0) 推荐(0)

Spark SQL概念学习系列之Spark SQL入门
摘要:前言 第1章 为什么Spark SQL? 第2章 Spark SQL运行架构 第3章 Spark SQL组件之解析 第4章 深入了解Spark SQL运行计划 第5章 测试环境之搭建 第6章 Spark SQL之基础应用 第7章 ThriftServer和CLI 第8章 Spark SQL之综合应用 阅读全文

posted @ 2018-06-01 18:14 Hi,王松柏 阅读(190) 评论(0) 推荐(0)

Spark MLlib机器学习
摘要:前言 Spark MLlib是Spark对常用的机器学习算法的实现库,同时包括相关的测试和数据生成器。 阅读全文

posted @ 2018-06-01 18:13 Hi,王松柏 阅读(112) 评论(0) 推荐(0)

对于maven创建spark项目的pom.xml配置文件(图文详解)
摘要:不多说,直接上干货! http://mvnrepository.com/ 这里,怎么创建,见 Spark编程环境搭建(基于Intellij IDEA的Ultimate版本)(包含Java和Scala版的WordCount)(博主强烈推荐) 这里, 我重点说下spark项目,因为,对于hadoop这样 阅读全文

posted @ 2018-05-31 13:25 Hi,王松柏 阅读(27744) 评论(0) 推荐(1)

导航