上一页 1 2 3 4 5 6 7 8 ··· 10 下一页
摘要: 异常如下: 这是我使用maven多模块去改造普通web项目是遇到的,开始发现单个无依赖区启动maven的web模块正常,加上就会报spring初始化失败,以及各种bean无法被注入 偶然情况下发现我在maven的web模块下发现加入了dubbo的jar包就会报错,上网了解到dubbo自身继承了spr 阅读全文
posted @ 2016-12-20 11:55 eRrsr 阅读(860) 评论(0) 推荐(0)
摘要: 注 : 待测试 一、准备两三台linux机器,最好是hadoop集群环境 机器A:10.0.0.2 机器B:10.0.0.3 机器C:10.0.0.4 二、个机器安装信息 机器A安装mysql(用于存储元数据信息)与Hive(用于开启hiveserver) 机器B可是作为mysql的主备 机器C作为 阅读全文
posted @ 2016-11-25 21:46 eRrsr 阅读(982) 评论(0) 推荐(0)
摘要: 组件 阅读全文
posted @ 2016-11-25 21:31 eRrsr 阅读(529) 评论(0) 推荐(0)
摘要: HDFS文件格式 数据存储的方式 常见的压缩技术 阅读全文
posted @ 2016-11-24 16:47 eRrsr 阅读(4359) 评论(0) 推荐(0)
摘要: Oozie 官方示例 自定义实现workcount的workflow 自定义shell的workflow 复杂DAG图设计(其实也就是顺序,并发执行多个job) coordinator的编写 阅读全文
posted @ 2016-11-24 13:16 eRrsr 阅读(776) 评论(0) 推荐(0)
摘要: Oozie 任务调度框架(基于工作流) 任务调度框架 Oozie三大功能 Oozie的架构 Oozie安装部署 阅读全文
posted @ 2016-11-24 12:48 eRrsr 阅读(578) 评论(0) 推荐(0)
摘要: 企业中的日志存放_1 企业中的日志存放_2 企业中常用架构 Flume多sink 阅读全文
posted @ 2016-11-24 12:40 eRrsr 阅读(736) 评论(0) 推荐(0)
摘要: 在HDFS的文件默认生成文件大小1K,如何设置文件大小和数量 使用Flume是为了将最新的数据或文件上传到HDFS上,那如果遇到分区表该如何解决 Flume上传文件默认是以FlumeData开头,如何更改开头信息 企业中多台Flume如何解决磁盘IO问题 如何解决不同操作系统下Flume 阅读全文
posted @ 2016-11-24 12:24 eRrsr 阅读(1349) 评论(0) 推荐(0)
摘要: 案例一: source:hive.log channel: memory sink: logger输出 案例二:source:hive.log channel: file sink: logger输出 案例三:source:hive.log channel: mem sink: hdfs 阅读全文
posted @ 2016-11-24 12:12 eRrsr 阅读(321) 评论(0) 推荐(0)
摘要: 企业架构 概念: 三大功能 collecting(收集),aggregating(聚合),moving(传输) 特点: on streaming data flows(基于流式的数据) Flume-ng只有一个角色节点: agent的角色,agent有source、channel、sink组成 Fl 阅读全文
posted @ 2016-11-24 12:07 eRrsr 阅读(330) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 7 8 ··· 10 下一页