上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 22 下一页
摘要: 1:什么是JVM JVM是Java Virtual Machine(Java虚拟机)的缩写,JVM是一种用于计算设备的规范,它是一个虚构出来的计算机,是通过在实际的计算机上仿真模拟各种计算机功能来实现的。Java虚拟机包括一套字节码指令集、一组寄存器、一个栈、一个垃圾回收堆和一个存储方法域。 JVM 阅读全文
posted @ 2019-04-24 09:59 丿少女梦丶 阅读(332) 评论(0) 推荐(0) 编辑
摘要: package org.thcic.ejw.util.encrypt; import java.io.ByteArrayOutputStream; import java.security.Key; import java.security.KeyFactory; import java.security.KeyPair; import java.security.KeyPairGenerat... 阅读全文
posted @ 2019-03-25 10:52 丿少女梦丶 阅读(282) 评论(0) 推荐(0) 编辑
摘要: /** * 是否签名正确,规则是:按参数名称a-z排序,遇到空值的参数不参加签名。 * @return boolean */ public static boolean isTenpaySign(String characterEncoding, SortedMap packageParams, String API_KEY) { ... 阅读全文
posted @ 2019-03-22 14:29 丿少女梦丶 阅读(209) 评论(0) 推荐(0) 编辑
摘要: 获取本机ip 获取用户ip 阅读全文
posted @ 2019-03-20 11:33 丿少女梦丶 阅读(241) 评论(0) 推荐(0) 编辑
摘要: 第一:在map端产生join mapJoin的主要意思就是,当链接的两个表是一个比较小的表和一个特别大的表的时候,我们把比较小的table直接放到内存中去,然后再对比较大的表格进行map操作。join就发生在map操作的时候,每当扫描一个大的table中的数据,就要去去查看小表的数据,哪条与之相符, 阅读全文
posted @ 2019-03-14 16:49 丿少女梦丶 阅读(188) 评论(0) 推荐(0) 编辑
摘要: 从JSONObject中解析数据,并赋给给定的对象 阅读全文
posted @ 2019-03-13 08:28 丿少女梦丶 阅读(1987) 评论(0) 推荐(0) 编辑
摘要: 一、Hadoop 系统架构 1.1 Hadoop1.x和Hadoop2.x 架构 在介绍HA之前,我们先来看下Hadoop的系统架构,这对于理解HA是至关重要的。Hadoop 1.x之前,其官方架构如图1所示: [ 图1.Hadoop 1.x架构图 ] 从图中可看出,1.x版本之前只有一个Namen 阅读全文
posted @ 2019-03-11 08:46 丿少女梦丶 阅读(1843) 评论(0) 推荐(1) 编辑
摘要: Shuffle的正常意思是洗牌或弄乱,可能大家更熟悉的是Java API里的Collections.shuffle(List)方法,它会随机地打乱参数list里的元素顺序。如果你不知道MapReduce里Shuffle是什么,那么请看这张图: 这张是官方对Shuffle过程的描述。但我可以肯定的是, 阅读全文
posted @ 2019-03-05 17:25 丿少女梦丶 阅读(1151) 评论(0) 推荐(0) 编辑
摘要: MapReduce简介 MapReduce是一种并行可扩展计算模型,并且有较好的容错性,主要解决海量离线数据的批处理。实现下面目标 ★ 易于编程 ★ 良好的扩展性 ★ 高容错性 MapReduce有哪些角色?各自的作用是什么? MapReduce由JobTracker和TaskTracker组成。J 阅读全文
posted @ 2019-03-05 17:13 丿少女梦丶 阅读(545) 评论(0) 推荐(0) 编辑
摘要: 1、YARN 是什么? 从业界使用分布式系统的变化趋势和 hadoop 框架的长远发展来看,MapReduce的 JobTracker/TaskTracker 机制需要大规模的调整来修复它在可扩展性,内存消耗,线程模型,可靠性和性能上的缺陷。在过去的几年中,hadoop 开发团队做了一些 bug 的 阅读全文
posted @ 2019-03-04 09:41 丿少女梦丶 阅读(3249) 评论(0) 推荐(0) 编辑
上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 22 下一页