Fries_Angle

摘要： JUC 并发学习 1、什么是JUC 源码+官方文档 面试高频问 java.util 工具包、包、分类 业务：普通的线程代码 Thread Runnable 没有返回值 2、线程与进程 线程、进程，没有不能使用一句话说出来的技术，不扎实！ 进程：一个程序，QQ.exe 程序的集合 一个进程往往可以包含 阅读全文

摘要： Kafka学习笔记 一、Kafka快速入门 1、安装部署 1.1集群规划 服务器1 服务器2 服务器3 Zookeeper Zookeeper Zookeeper kafka kafka kafka 1.2集群部署 1）解压安装包 [gaocl@hadoop102 software]$ tar -z 阅读全文

摘要： 前言 2020/06/05 时隔了一个月左右时间，今日开始正式更新博客 这一个月学习制作了大数据的电商项目，在即将完成之前感觉到很是乏味，并没有Java开发能带来的快感。所以先放一放，观察下行情。 所以回来整理Java所学的知识，在这个月争取拿到实习的机会。 下面记录下SSM模板的构建过程，虽然之前 阅读全文

摘要： <build> <plugins> <plugin> <artifactId>maven-compiler-plugin</artifactId> <version>2.3.2</version> <configuration> <source>1.8</source> <target>1.8</t 阅读全文

摘要： 一、HBase简介 1.1 HBase定义 HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。 1.2 HBase数据模型 逻辑上，HBase的数据模型同关系型数据库很类似，数据存储在一张表中，有行有列。但从HBase的底层物理存储结构（K-V）来看，HBase更像是一个multi 阅读全文

摘要： 一、Kafka概述 1.1定义 Kafka是一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域。 1.2 消息队列（Message Queue） 1.2.1 传统消息队列的应用场景 1.2.2 消息队列的两种模式 （1）点对点模式（一对一，消费者主动拉取数据，消息收到后消息清除） 阅读全文

摘要： 一、 Flume概述 1.1 Flume定义 Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。 Flume最主要的作用就是，实时读取服务器本地磁盘的数据，将数据写入到HDFS。 1.2 Flume基础架构 下面我们来 阅读全文

摘要： 一、Hive基本概念 Hive：由Facebook开源用于解决海量结构化日志的数据统计工具。 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。 本质是：将HQL转化成MapReduce程序 1）Hive处理的数据存储在HDFS 2）Hive分 阅读全文

摘要： 一、概述 Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。 二、特点 Zookeeper：一个领导者（Leader），多个跟随者（Follower）组成的集群 集群中只要有半数以上节点存活，Zookeeper集群就能正常服务 全局数据一致：每个Server保存一份 阅读全文

摘要： 一、MapReduce定义 MapReduce是一个分布式运算程序的编程框架，是基于Hadoop的数据分析计算的核心框架。 MapReduece处理过程分为两个阶段：Map和Reduce。 Map复测把一个任务分解成多个任务， Reduce负责把分解后多任务处理的结果汇总。 优点： MapReduc 阅读全文