摘要：
mysql的安装可见: http://www.cnblogs.com/wenbronk/p/6840484.html 很久不用mysql, 今天建表都不会了, , , 慢慢补充 sql语言分为3种: DDL, DML, DCL DDL ddl的操作主要是针对数据库和数据表的 1, 对数据库的操作 1 阅读全文
posted @ 2017-08-15 10:35
bronk
阅读(9039)
评论(0)
推荐(0)
摘要：
sprinboot整合mybatis, 有2种方式, 第一种完全使用注解的方式, 还有一种就是使用xml文件的方式 项目使用gradle + idea, 数据源使用druid, 多使用groovy编写 环境配置 1, 依赖 2, user-schame.sql 在springboot的配置文件中, 阅读全文
posted @ 2017-08-14 15:15
bronk
阅读(947)
评论(0)
推荐(0)
摘要：
1, hive简介 hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduc 阅读全文
posted @ 2017-08-12 22:51
bronk
阅读(451)
评论(0)
推荐(0)
摘要：
1, tf-idf 计算每个人的词条中的重要度 需要3个mapreduce 的 job执行, 第一个计算 TF 和 n, 第二个计算 DF, 第三个代入公式计算结果值 1, 第一个job reduce partition mainJob 2, 第二个 reduce mainjob 3, 第三个Job 阅读全文
posted @ 2017-08-12 17:19
bronk
阅读(474)
评论(0)
推荐(0)
摘要：
1, 认识stream(声明式编程) Stream 不是集合元素，它不是数据结构并不保存数据，它是有关算法和计算的，它更像一个高级版本的 Iterator, 原始版本的Iterator，用户只能一个一个的遍历元素并对其执行某些操作；高级版本的Stream，用户只要给出需要对其包含的元素执行什么操作， 阅读全文
posted @ 2017-08-11 14:08
bronk
阅读(1149)
评论(0)
推荐(0)
摘要：
好友推荐的案例, 需要两个job, 第一个进行好友关系度计算, 第二个job将计算的关系进行推荐 1, fof关系类 2, user类 3, sort 4, group 5, job 初始文档 系列来自尚学堂视频 阅读全文
posted @ 2017-08-08 20:04
bronk
阅读(436)
评论(0)
推荐(0)
摘要：
weather案例, 简单分析每年的前三个月的最高温即可, 使用自定义的分组和排序 设计分析 设定多个reduce 每年的数据都很多，如果按照默认情况处理，统计性能是非常慢（因为默认只有一个reduce），所以我们需要重新分配reduceTask，将一年的数据交给一个reduceTask处理， 分区 阅读全文
posted @ 2017-08-08 20:01
bronk
阅读(459)
评论(0)
推荐(0)
摘要：
经纬度计算, 本质上是球面三角函数的应用, 将数学公式转换为代码的过程, 站在前人的肩膀上, 自己又补充了一点: 阅读全文
posted @ 2017-08-08 15:30
bronk
阅读(2236)
评论(0)
推荐(0)
摘要：
1, 遍历list集合 List<Integer> list = new ArrayList<>(); list.add(1); list.add(2); list.add(3); // 直接打印 list.forEach(System.out::println); // 取值分别操作 list.f 阅读全文
posted @ 2017-08-08 14:24
bronk
阅读(35939)
评论(0)
推荐(0)
摘要：
转: http://www.cnblogs.com/rubinorth/p/5799848.html 参考尚学堂视频 1, 概念( 来自百度百科) PageRank是Google专有的算法，用于衡量特定网页相对于搜索引擎索引中的其他网页而言的重要程度。它由Larry Page 和 Sergey Br 阅读全文
posted @ 2017-08-07 23:55
bronk
阅读(594)
评论(1)
推荐(0)
浙公网安备 33010602011771号