2017年3月27日
Yarn 模式 与 电影受众分析系统
摘要： yarn模式分为两种模式： 一、Yarn-cluster模式 1、通过spark-submit提交spark jar包（Application）,与RM进行通信请求启动AM 2、RM接收到请求之后，会在一个相对空闲的nodemanager中分配Container,然后再此Container中启动AM 阅读全文
posted @ 2017-03-27 17:21 凌-风 阅读(819) 评论(0) 推荐(0)
面试范围
摘要： 面试问的比较多的 JAVA:进程、线程、多线程、反射、IO、集合、网络编程、接口、类与对象 Linux：shell脚本、AWK与sed指令，其他常用指令 hadoop：HDFS读写机制、mapreduce的执行流程、shuffle的执行流程、yarn平台的执行流程、hive的架构、hive中的各种j 阅读全文
posted @ 2017-03-27 10:09 凌-风 阅读(411) 评论(0) 推荐(0)