2020年10月3日
hadoop2.6.4-ha集群搭建
摘要： hadoop2.0已经发布了稳定版本了，增加了很多特性，比如HDFS HA、YARN等。最新的hadoop-2.6.4又增加了YARN HA 注意：apache提供的hadoop-2.6.4的安装包是在32位操作系统编译的，因为hadoop依赖一些C++的本地库，所以如果在64位的操作上安装hado 阅读全文
posted @ 2020-10-03 18:09 十一vs十一 阅读(135) 评论(0) 推荐(0)
12_离线计算系统_第12天（辅助系统）
摘要： 课程大纲（辅助系统） 离线辅助系统 数据接入 Flume介绍 Flume组件 Flume实战案例 任务调度 调度器基础 市面上调度工具 Oozie的使用 Oozie的流程定义详解 数据导出 sqoop基础知识 sqoop实战及原理 Sqoop数据导入实战 Sqoop数据导出实战 Sqoop作业操作 阅读全文
posted @ 2020-10-03 18:07 十一vs十一 阅读(214) 评论(0) 推荐(0)
11_离线计算系统_第11天（HIVE详解）v.2
摘要： 目录 课程大纲（HIVE增强） 3 1. Hive基本概念 4 1.1 Hive简介 4 1.1.1 什么是Hive 4 1.1.2 为什么使用Hive 4 1.1.3 Hive的特点 4 1.2 Hive架构 5 1.2.1 架构图 5 1.2.2 基本组成 5 1.2.3 各组件的基本功能 5 阅读全文
posted @ 2020-10-03 18:05 十一vs十一 阅读(278) 评论(0) 推荐(0)
11_离线计算系统_第11天（hadoop高可用）---一般有用
摘要： 课程大纲（HADOOP高可用机制） HA运作机制 什么是HA HADOOP如何实现HA HDFS-HA详解 HA集群搭建 目标： 掌握分布式系统中HA机制的思想 掌握HADOOP内置HA的运作机制 掌握HADOOP2.x的HA集群机制配置 1 Hadoop的HA机制 前言：正式引入HA机制是从had 阅读全文
posted @ 2020-10-03 18:02 十一vs十一 阅读(115) 评论(0) 推荐(0)
2020年10月2日
04_离线计算系统_第4天（mapreduce加强）
摘要： 课程大纲（MAPREDUCE详解） MapReduce快速入门 如何理解map、reduce计算模型 Mapreudce程序运行演示 Mapreduce编程规范及示例编写 Mapreduce程序运行模式及debug方法 MapReduce高级特性 Mapreduce程序的核心机制 MapReduce 阅读全文
posted @ 2020-10-02 22:25 十一vs十一 阅读(168) 评论(0) 推荐(0)
03_离线计算系统_第3天（MAPREDUCE详解）v.3
摘要： 目录 课程大纲（MAPREDUCE详解） 3 1. MAPREDUCE入门 4 1.1 为什么要MAPREDUCE 4 1.2 MAPREDUCE程序运行演示 4 1.3 MAPREDUCE 示例编写及编程规范 4 1.3.1 编程规范 4 1.3.2 wordcount示例编写 5 1.4 MAP 阅读全文
posted @ 2020-10-02 18:25 十一vs十一 阅读(227) 评论(0) 推荐(0)
云计算概念详解 ---一般有用IaaS PaaS 对比
摘要： 云计算的三种服务模式：IaaS，PaaS和SaaS ”云服务”现在已经快成了一个家喻户晓的词了。如果你不知道PaaS, IaaS 和SaaS的区别，那么也没啥，因为很多人确实不知道。 “云”其实是互联网的一个隐喻，“云计算”其实就是使用互联网来接入存储或者运行在远程服务器端的应用，数据，或者服务。 阅读全文
posted @ 2020-10-02 18:08 十一vs十一 阅读(219) 评论(0) 推荐(0)
02_离线计算系统_第2天（HDFS详解）
摘要： 目录 课程大纲（HDFS详解） 2 1. HDFS前言 3 2. HDFS的概念和特性 3 3. HDFS的shell(命令行客户端)操作 4 3.1 HDFS命令行客户端使用 4 3.2命令行客户端支持的命令参数 4 3.2 常用命令参数介绍 5 4. hdfs的工作机制 8 4.1 概述： 8 阅读全文
posted @ 2020-10-02 00:48 十一vs十一 阅读(198) 评论(0) 推荐(0)
01_离线计算系统_第1天（HADOOP快速入门）
摘要： 目录 课程大纲（HADOOP快速入门） 2 1. HADOOP 快速入门 3 什么是HADOOP 3 HADOOP产生背景 3 HADOOP在大数据、云计算中的位置和关系 3 国内外HADOOP应用案例介绍 4 国内HADOOP的就业情况分析 5 HADOOP生态圈以及各组成部分的简介 6 分布式系 阅读全文
posted @ 2020-10-02 00:47 十一vs十一 阅读(223) 评论(0) 推荐(0)
2020年9月30日
idea快捷键
摘要： Ctrl+Shift + Enter，语句完成“！”，否定完成，输入表达式时按 “！”键Ctrl+E，最近的文件Ctrl+Shift+E，最近更改的文件Shift+Click，可以关闭文件Ctrl+[ OR ]，可以跑到大括号的开头与结尾Ctrl+F12，可以显示当前文件的结构Ctrl+F7，可以查 阅读全文
posted @ 2020-09-30 14:31 十一vs十一 阅读(152) 评论(0) 推荐(0)