随笔分类 -  spark

摘要:本文主要是翻译Spark官网Spark SQL programming guide 。只能保证大概意思,尽量保证细节。英文水平有限,如果有错误的地方请指正,轻喷。目录导航在右上角 Spark SQL、DataFrames 和 Datasets 指南 概述 Spark SQL 是一个结构化数据处理的 阅读全文
posted @ 2018-09-19 01:26 早起的虫儿去吃鸟 阅读(617) 评论(0) 推荐(0)
摘要:本文主要是翻译Spark官网Quick Start。只能保证大概意思,尽量保证细节。英文水平有限,如果有错误的地方请指正,轻喷 目录导航在右上角,感谢两个大佬(孤傲苍狼 JavaScript自动生成博文目录导航 和 juejiang 为博客园添加目录的配置总结)提供的帮助。这篇文章还有个问题 sca 阅读全文
posted @ 2018-09-16 01:31 早起的虫儿去吃鸟 阅读(782) 评论(2) 推荐(0)
摘要:1. 首先要安装java8,参考 【Linux】Linux服务器(centos7)环境搭建java/python3/nginx 2. 然后安装scala 首先下载scala, 解压,然后 在文件末尾添加, 把路径换成自己的解压路径 然后加载新的环境变量并检查是否安装成功 3.下载spark,解压 在 阅读全文
posted @ 2018-09-15 19:08 早起的虫儿去吃鸟 阅读(796) 评论(0) 推荐(0)