我的随笔

大数据学习day14-----第三阶段-----scala02------1. 元组 2.类、对象、继承、特质 3.函数（必须掌握）

一y样 2019-11-21 00:03 阅读:246 评论:0 推荐:0

大数据学习day13------第三阶段----scala01-----函数式编程。scala以及IDEA的安装，变量的定义，条件表达式，for循环（守卫模式，推导式，可变参数以及三种遍历方式），方法定义，数组以及集合（可变和非可变），数组中常用的方法

一y样 2019-11-19 21:15 阅读:173 评论:0 推荐:0

大数据学习day11------hbase_day01----1. zk的监控机制，2动态感知服务上下线案例 3.HDFS-HA的高可用基本的工作原理 4. HDFS-HA的配置详解 5. HBASE（简介，安装，shell客户端，java客户端）

一y样 2019-11-15 10:22 阅读:207 评论:0 推荐:0

大数据学习day10-----zookeeper--------1.小文件合并，2 输入和输出 3 多路径输出 4.zookeeper(选举机制，安装，zk的shell客户端、java客户端)

一y样 2019-11-13 21:38 阅读:253 评论:0 推荐:0

大数据学习day09----hadoop--day06-------1.MR程序在yarn上运行的基本流程 2. 数据倾斜解决方案 3.高效topN（指定分区器，分组规则，自定义排序规则）

一y样 2019-11-11 17:54 阅读:307 评论:0 推荐:0

大数据学习-----day08-----hadoop05-------0.补充（查询源代码的操作）1.MR程序数据处理全流程 2.yarn 3. merger案例（小文件合并）4.数据倾斜 5join案例

一y样 2019-11-09 17:09 阅读:292 评论:0 推荐:0

大数据学习day7------hadoop04----1 流量案例 2 电影案例(统计每部电影的均分，统计每个人的均分，统计电影的评论次数，***统计每部电影评分最高的N条记录(Integer.max)，统计评论次数最多的n部电影（全局排序）) 3 line线段重叠次数案例 4.索引案例

一y样 2019-11-07 15:07 阅读:593 评论:0 推荐:0

大数据学习-----day06----hadoop03-------1. hdfs的checkpoint机制（有一点点疑问）; 2 MapReduce

一y样 2019-11-05 15:27 阅读:525 评论:0 推荐:0

大数据学习---day05----hadoop02--------1补充配置（hadoop的环境变量配置，修改shell客户端默认操作的文件系统为hdfs系统，集群的批量启动（hdfs-site.xml中各参数的详解），查看那么node和datanode的日志信息，namenode和datanode的交互过程）2HDFS的客户端操作（上传，下载等等）

一y样 2019-11-03 12:07 阅读:523 评论:0 推荐:0

大数据学习----day04------hadoop01------1. 序列化；2. 迭代器；3服务的基本概念;4.Hadoop; 5, HDFS

一y样 2019-10-31 14:22 阅读:217 评论:0 推荐:0