摘要： Master和Worker是执行任务之前存在的进程 (类似于公司) Driver和Excutor是任务执行之后存在的进程(类似于公司接到项目后才成立的项目小组) 启动步骤: 注测的目的: 阅读全文

摘要： HDFSNameNode 50070 dfs.namenode.http.address http服务的端口(可从网页登陆) 90000 fs.default.name 内部通讯的端口 ZKFC 8019 dfs.ha.zkfc.port ZooKeeper FailoverController,用 阅读全文

摘要： log4j.properties的文件内容如下 log4j.rootLogger=INFO, stdoutlog4j.appender.stdout=org.apache.log4j.ConsoleAppenderlog4j.appender.stdout.layout=org.apache.log 阅读全文

摘要： /** * 等待唤醒之生产者和消费者模型 * 生成者: 创建和添加数据的线程 * 消费者: 销毁和删除数据的线程 * 问题1: 生成者生成数据过快, 消费者消费数据相对慢,不接收数据了, 会造成数据丢失 * 问题2: 消费者消费数据过快, 生成者生成数据相对慢,不发送数据了, 会造成数据被重复读取 阅读全文

摘要： package com.hls.juc;import java.util.concurrent.locks.Lock;import java.util.concurrent.locks.ReentrantLock;/** * 解决多线程安全问题的方式: 3种 * synchronized: 隐式锁 阅读全文

摘要： package com.hls.juc;import java.util.concurrent.Callable;import java.util.concurrent.ExecutionException;import java.util.concurrent.FutureTask;/** * 创 阅读全文

摘要： import java.util.concurrent.CountDownLatch;/** * 闭锁: 在进行某些运算时, 只有其他所有线程的运算全部完成,当前运算才继续执行(程序流中加了一道栅栏) * 联想: 相当于水电站的水坝, 会拦截上游的水, 当积累到一定水位才放水. * 马场赛马,需要所 阅读全文

摘要： import java.util.Iterator;import java.util.concurrent.CopyOnWriteArrayList;/** * 集合在多线程中同步的方式: * 1. Collections.synchronizedMap() * 2. Hashtable锁机制: 将 阅读全文

摘要： /** * 线程的开销 : 线程的创建和销毁 * 线程的上下文切换和调度 * 线程的同步 * * * 多线程的内存模型: 线程独有的工作内存(线程缓存用于提高效率)---------所有线程共享的主内存 * * 线程读取在主内存的成员变量(即共享变量)的过程: * 1. 线程的工作内存会去读取主内存的成员变量并保存副本 * 2. 线程在工作内存... 阅读全文