摘要：
Eureka服务注册中心是netflix开源组织提供的一个服务高可用的解决方案，是一种基于REST(具像状态传输)的服务，主要用于AWS云中定位服务，以实现中间层服务器的负载平衡和故障转移。 1. 搭建Eureka 使用idea工具直接创建一个新的SpringBoot项目，在选择依赖的界面勾选Clo 阅读全文
摘要：
1. 引言 先看下最基本的启动 Spring 容器的例子： public static void main(String[] args) { ApplicationContext context = new ClassPathXmlApplicationContext("classpath:appl 阅读全文
摘要：
配置Hadoop环境变量：1.Windows环境变量配置 鼠标右键点击‘计算机’-‘属性’-‘高级系统设置’-‘环境变量’-单击新建如图： 2.接着找到环境变量path，将hadoop的bin目录加入到后面: 修改hadoop配置文件 （1）编辑“D:\hadoop-2.7.5\etc\hadoop 阅读全文
摘要：
1. 概念 (1) 什么是nginx? Nginx (engine x) 是一款轻量级的Web 服务器 、反向代理服务器及电子邮件（IMAP/POP3）代理服务器。 (2) 什么是反向代理？ 反向代理（Reverse Proxy）方式是指以代理服务器来接受internet上的连接请求，然后将请求转发 阅读全文
摘要：
1. 基本原理 2.x版本中，HDFS架构解决了单点故障问题，即引入双NameNode架构，同时借助共享存储系统来进行元数据的同步，共享存储系统类型一般有几类，如：Shared NAS+NFS、BookKeeper、BackupNode 和 Quorum Journal Manager(QJM)，上 阅读全文
摘要：
SpringBoot提供了多种处理异常方式，以下为常用的几种 1. 自定义错误异常页面 SpringBoot默认的处理异常的机制：SpringBoot默认的已经提供了一套处理异常的机制。一旦程序中出现了异常SpringBoot会像/error的url发送请求。在springBoot中提供了一个叫Ba 阅读全文
摘要：
1. 集群健康状况处理 当集群处于yellow或者red状态的时候，整体处理步骤如下： （1） 首先查看集群状态 { "cluster_name": "elasticsearch", "status": "yellow", "timed_out": false, "number_of_nodes": 阅读全文
摘要：
1. reduceByKey reduceByKey的作用对像是(key, value)形式的rdd，而reduce有减少、压缩之意，reduceByKey的作用就是对相同key的数据进行处理，最终每个key只保留一条记录，保留一条记录通常，有两种结果：一种是只保留我们希望的信息，比如每个key出现 阅读全文
摘要：
1. <definitions/> 这部分在基础篇里已经介绍，主要说明引用了哪些schema以及schema的位置等，可以看下基础篇的介绍，SayHello的Demo这部分内容如下： 2. <types/> <types> 元素定义 web service 使用的数据类型，为了最大程度的平台中立性， 阅读全文
摘要：
Louvain算法是一种基于图数据的社区发现算法，算法的优化目标为最大化整个数据的模块度，模块度的计算如下： 其中m为图中边的总数量，k_i表示所有指向节点i的连边权重之和，k_j同理。A_{i,j} 表示节点i，j之间的连边权重。有一点要搞清楚，模块度的概念不是Louvain算法发明的，而Louv 阅读全文