摘要：一、简介 Scala作为一门函数式编程与面向对象完美结合的语言，函数式编程部分也有其独到之处，本文就将针对Scala中关于函数式编程的一些常用基本内容进行介绍； 二、在Scala中定义函数 2.1 定义函数 和Python相似，Scala中函数的定义和方法（类中的函数称为方法）都以关键词def开始， 阅读全文

摘要：一、简介 最近在暑期实习，在数据挖掘的主业之外，也帮助同事做了很多网络数据采集的内容，接下来的数篇文章就将一一罗列出来，来续写几个月前开的这个网络数据采集实战的坑。 二、马蜂窝评论数据采集实战 2.1 数据要求 这次我们需要采集的数据是知名旅游网站马蜂窝下重庆区域内所有景点的用户评论数据，如下图所示 阅读全文

摘要：一、简介 在Scala看来，一切皆是对象，对象是Scala的核心，Scala面向对象涉及到class、object、构造器等，本文就将对class中的重点内容进行介绍； 二、Scala中的类 2.1 普通类 在Scala中定义普通类的方式如下面的示例： 即class+类名+{类中的内容，包括类自带的 阅读全文

摘要：一、简介 由于Spark主要是由Scala编写的，虽然Python和R也各自有对Spark的支撑包，但支持程度远不及Scala，所以要想更好的学习Spark，就必须熟练掌握Scala编程语言，Scala与Java较为相似，且在Scala中可以调用很多Java中的包，本文就将针对Scala中的基础数据 阅读全文