麦哲思科技

摘要：写了一年博客：2014-04-20，浑浑噩噩已经工作了快一年的我决定开始写Blog。最初是如何下定的决心已经记不清，开始时也仅仅是把博客当作一个笔记本，将学习过程记录下来。而且发表的文章没什么技术含量，也没人看。就这样坚持了两个月，这时自己的水平提高了些，而且积分也可以将文章发表到... 阅读全文

摘要：以前也用了一些推荐算法写过一些应用，最近用上了网易云音乐，于是便想写篇推荐引擎的文章。 一.推荐引擎 主动发现用户当前或潜在需求，并主动推送信息给用户的信息网络。挖掘用户的喜好和需求，主动向用户推荐其感兴趣或者需要的对象。 二.推荐引擎的分类 1.基于人口统计学的推荐 根据... 阅读全文

摘要：yarn模式默认启动2个executor，无论你有多少的worker节点 standalone模式每个worker一个executor，无法修改executor的数量 partition是RDD中的一个dataset，一般默认都是2个 executor中的task数量由partition... 阅读全文