R星月

2017年7月3日

摘要：目录视图摘要视图订阅目录视图摘要视图订阅目录视图摘要视图订阅【观点】物联网与大数据将助推工业应用的崛起，你认同么？ CSDN日报20170703——《从高考到程序员——我一直在寻找答案》【直播】探究Linux的总线、设备、驱动模型！数据倾斜是多么痛？spark作业调优秘籍 20 阅读全文

posted @ 2017-07-03 21:18 R星月阅读(260) 评论(0) 推荐(0)

Spark性能优化指南——高级篇

摘要：本文转自美团点评技术团队博客，原文地址：http://tech.meituan.com/spark-tuning-pro.html 前言继基础篇讲解了每个Spark开发人员都必须熟知的开发调优与资源调优之后，本文作为《Spark性能优化指南》的高级篇，将深入分析数据倾斜调优与shuffle调优，以阅读全文

posted @ 2017-07-03 21:16 R星月阅读(804) 评论(0) 推荐(0)

Spark性能优化指南——基础篇

摘要：本文转载自美团点评技术团队博客，原文地址：http://tech.meituan.com/spark-tuning-basic.html 前言在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机阅读全文

posted @ 2017-07-03 21:15 R星月阅读(4415) 评论(0) 推荐(0)

2017年3月16日

sparkmlib-相关系数

摘要：一、基本原理在stat包中实现了皮尔逊（Pearson）与斯皮尔曼（Spearman）两类相关系数的计算（1）Pearson： (x，y)协方差/[(x标准方差)*(y标准方差)] 阅读全文

posted @ 2017-03-16 15:03 R星月阅读(264) 评论(0) 推荐(0)

spark 之主成分分析

摘要： C4∗2 阅读全文

posted @ 2017-03-16 14:48 R星月阅读(282) 评论(0) 推荐(0)

2016年12月15日

spark 之knn算法

摘要：好长时间忙的没写博客了。看到有人问spark的knn，想着做推荐入门总用的knn算法，顺便写篇博客。作者：R星月 http://www.cnblogs.com/rxingyue/p/6182526.html knn算法的大致如下： 1）算距离：给定测试对象，计算它与训练集中的每个对象的距离 2）找阅读全文

posted @ 2016-12-15 11:24 R星月阅读(5945) 评论(0) 推荐(0)

2016年10月11日

机器学习之-奇异值分解(SVD)原理详解及推导

摘要：转载 http://blog.csdn.net/zhongkejingwang/article/details/43053513 在网上看到有很多文章介绍SVD的，讲的也都不错，但是感觉还是有需要补充的，特别是关于矩阵和映射之间的对应关系。前段时间看了国外的一篇文章，叫A Singularly Va 阅读全文

posted @ 2016-10-11 11:54 R星月阅读(468) 评论(0) 推荐(0)

机器学习之 PCA （二）

摘要：参考 http://www.cnblogs.com/frombeijingwithlove/p/5931872.html 阅读全文

posted @ 2016-10-11 10:48 R星月阅读(124) 评论(0) 推荐(0)

机器学习之 PCA

摘要： PCA（Principal Component Analysis）是一种常用的数据分析方法。PCA通过线性变换将原始数据变换为一组各维度线性无关的表示，可用于提取数据的主要特征分量，常用于高维数据的降维。网上关于PCA的文章有很多，但是大多数只描述了PCA的分析过程，而没有讲述其中的原理。这篇文章的阅读全文

posted @ 2016-10-11 10:14 R星月阅读(600) 评论(0) 推荐(0)

2016年10月10日

机器学习中的相似性度量

摘要：在做分类时常常需要估算不同样本之间的相似性度量(Similarity Measurement)，这时通常采用的方法就是计算样本间的“距离”(Distance)。采用什么样的方法计算距离是很讲究，甚至关系到分类的正确与否。本文的目的就是对常用的相似性度量作一个总结。 1. 欧氏距离 2. 曼哈顿距离阅读全文

posted @ 2016-10-10 11:35 R星月阅读(167) 评论(0) 推荐(0)

关注数据挖掘，机器学习
http://www.cnblogs.com/rxingye

公告

R星月

关注 数据挖掘，机器学习 http://www.cnblogs.com/rxingye

公告

关注数据挖掘，机器学习
http://www.cnblogs.com/rxingye