• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
 






天生自然

 
 

Powered by 博客园
博客园 | 首页 | 新随笔 | 联系 | 订阅 订阅 | 管理

2020年1月9日

吴裕雄--天生自然HADOOP操作实验学习笔记:协同过滤算法
摘要: 实验目的 初步认识推荐系统 学会用mapreduce实现复杂的算法 学会系统过滤算法的基本步骤 实验原理 前面我们说过了qq的好友推荐,其实推荐算法是所有机器学习算法中最重要、最基础、最复杂的算法,一个推荐系统的架构,需要综合考虑离线计算、实时计算。需要用到的技术可能还有Flume、Kafka、Re 阅读全文
posted @ 2020-01-09 10:39 吴裕雄 阅读(566) 评论(0) 推荐(0)
 
吴裕雄--天生自然HADOOP操作实验学习笔记:pagerank算法
摘要: 实验目的 了解PageRank算法 学会用mapreduce解决实际的复杂计算问题 实验原理 1.pagerank算法简介 PageRank,即网页排名,又称网页级别、Google左侧排名或佩奇排名。 pagerank是Google排名运算法则(排名公式)的一部分,pagerank是Google用于 阅读全文
posted @ 2020-01-09 01:09 吴裕雄 阅读(396) 评论(0) 推荐(0)
 
吴裕雄--天生自然HADOOP操作实验学习笔记:qq好友推荐算法
摘要: 实验目的 初步认识图计算的知识点 复习mapreduce的知识点,复习自定义排序分组的方法 学会设计mapreduce程序解决实际问题 实验原理 QQ好友推荐算法是所有推荐算法中思路最简单的,我们利用的思想就是好友的好友很有可能是自己的好友,而共同好友越多,说明两个人认识的可能性越大。其实这个想法属 阅读全文
posted @ 2020-01-09 00:53 吴裕雄 阅读(958) 评论(0) 推荐(0)
 
吴裕雄--天生自然HADOOP操作实验学习笔记:Wor的Count程序的编写
摘要: 实验目的 理解mapreduce的工作原理 理解Partitioner的书写方法 理解GroupingComparator的书写方法 实验原理 我们已经学习了hadoop的大部分基础知识,剩下的就是利用hadoop解决实际的业务问题。首先我们回顾一下mapreduce的工作过程: 数据通过Input 阅读全文
posted @ 2020-01-09 00:43 吴裕雄 阅读(253) 评论(0) 推荐(0)