摘要：
异常如下: 这是我使用maven多模块去改造普通web项目是遇到的,开始发现单个无依赖区启动maven的web模块正常,加上就会报spring初始化失败,以及各种bean无法被注入 偶然情况下发现我在maven的web模块下发现加入了dubbo的jar包就会报错,上网了解到dubbo自身继承了spr 阅读全文
posted @ 2016-12-20 11:55
eRrsr
阅读(860)
评论(0)
推荐(0)
摘要：
注 : 待测试 一、准备两三台linux机器，最好是hadoop集群环境 机器A：10.0.0.2 机器B：10.0.0.3 机器C：10.0.0.4 二、个机器安装信息 机器A安装mysql(用于存储元数据信息)与Hive(用于开启hiveserver) 机器B可是作为mysql的主备 机器C作为 阅读全文
posted @ 2016-11-25 21:46
eRrsr
阅读(982)
评论(0)
推荐(0)
摘要：
组件 阅读全文
posted @ 2016-11-25 21:31
eRrsr
阅读(529)
评论(0)
推荐(0)
摘要：
HDFS文件格式 数据存储的方式 常见的压缩技术 阅读全文
posted @ 2016-11-24 16:47
eRrsr
阅读(4359)
评论(0)
推荐(0)
摘要：
Oozie 官方示例 自定义实现workcount的workflow 自定义shell的workflow 复杂DAG图设计(其实也就是顺序,并发执行多个job) coordinator的编写 阅读全文
posted @ 2016-11-24 13:16
eRrsr
阅读(776)
评论(0)
推荐(0)
摘要：
Oozie 任务调度框架(基于工作流) 任务调度框架 Oozie三大功能 Oozie的架构 Oozie安装部署 阅读全文
posted @ 2016-11-24 12:48
eRrsr
阅读(578)
评论(0)
推荐(0)
摘要：
企业中的日志存放_1 企业中的日志存放_2 企业中常用架构 Flume多sink 阅读全文
posted @ 2016-11-24 12:40
eRrsr
阅读(736)
评论(0)
推荐(0)
摘要：
在HDFS的文件默认生成文件大小1K,如何设置文件大小和数量 使用Flume是为了将最新的数据或文件上传到HDFS上,那如果遇到分区表该如何解决 Flume上传文件默认是以FlumeData开头,如何更改开头信息 企业中多台Flume如何解决磁盘IO问题 如何解决不同操作系统下Flume 阅读全文
posted @ 2016-11-24 12:24
eRrsr
阅读(1349)
评论(0)
推荐(0)
摘要：
案例一: source：hive.log channel: memory sink: logger输出 案例二:source：hive.log channel: file sink: logger输出 案例三:source：hive.log channel: mem sink: hdfs 阅读全文
posted @ 2016-11-24 12:12
eRrsr
阅读(321)
评论(0)
推荐(0)
摘要：
企业架构 概念: 三大功能 collecting(收集),aggregating(聚合),moving(传输) 特点: on streaming data flows(基于流式的数据) Flume-ng只有一个角色节点: agent的角色,agent有source、channel、sink组成 Fl 阅读全文
posted @ 2016-11-24 12:07
eRrsr
阅读(330)
评论(0)
推荐(0)
浙公网安备 33010602011771号