随笔分类 -  Spark

推荐系统-05-Spark电影推荐、评估与部署
摘要:一、新建scala项目 二、构造程序 代码如下 导入引用库 三、打包部署 程序运行时,需要指定输入数据路径,数据包含了ratings.dat和movies.dat,数据都包含在了一个数据包。[点击下载][1], 然后解压。 配置运行参数 点击edit configuration,在左侧点击该项目。在 阅读全文
posted @ 2018-05-16 18:57 陈峰 阅读(1823) 评论(0) 推荐(0)
推荐系统-0X-电影推荐与结果评估
摘要:``` scala import spark.sql import org.apache.spark.sql.types._ import org.apache.spark.mllib.recommendation.ALS import org.apache.spark.mllib.recommendation.MatrixFactorizationModel import org.apache.... 阅读全文
posted @ 2018-05-14 21:40 陈峰 阅读(603) 评论(0) 推荐(0)
推荐系统-01-简单逻辑回归
摘要:``` scala import org.apache.spark.ml.feature._ import org.apache.spark.ml.param.ParamMap import org.apache.spark.ml.classification.LogisticRegression import org.apache.spark.ml.{Pipeline,PipelineModel... 阅读全文
posted @ 2018-05-11 19:20 陈峰 阅读(914) 评论(0) 推荐(0)