摘要： 接到一个需求, 需要对请求(GET)里面的某个参数 的特定的值, 进行限流; 因为不限流的话, 不知道什么时候这个id的请求飙一下, 服务端就被压死了... 就像这样: /index.html?id=1234, 当 id == 1234的时候, 需要进行限流, id != 1234不管 服务端最前面 阅读全文

摘要： 1.多种配置注入，包括了注入普通字符串，注入系统属性，注入表达式结果，注入其他bean属性，注入文件资源，注入网址资源，指定Properties文件注入并注入值，PropertySource注入需要指定，PropertySource注入需要实现。 2. 根据需求，可将应用配置配置到txt文件中，再已 阅读全文

摘要： 1. spring.profiles.active 指定使用的profile 2. Book为配置类， profile中的配置对Book类进行注入 3. @ConfigurationProperties(prefix = "book") 开启配置文件管理并用前缀为book的值进行注入 阅读全文

摘要： 1.通过@Aspect注解声明一个切面 2.通过@Component让此切面成为Spring容器管理的Bean 3.通过@PointCut注解声明切点 4.通过@After注解声明一个建言，并用@PointCut定义的切点 5.通过发射获得注解上的属性，然后做日志记录的相关操作，下面的相同 6.通过 阅读全文

摘要： 从202将现有镜像搬到207的过程。 先说导出，两种方法：Docker save 和 docker export，前者保存镜像，后者导出容器。 docker save docker.io/java:7-jre > img_java_7_jre.tar 而导出容器则需要先启动一个容器。 docker 阅读全文

摘要： Hadoop YARN同时支持内存和CPU两种资源的调度，本文介绍如何配置YARN对内存和CPU的使用。 YARN作为一个资源调度器，应该考虑到集群里面每一台机子的计算资源，然后根据application申请的资源进行分配Container。Container是YARN里面资源分配的基本单位，具有一 阅读全文

摘要： 本文主要了解Spark On YARN部署模式下的内存分配情况，因为没有深入研究Spark的源代码，所以只能根据日志去看相关的源代码，从而了解“为什么会这样，为什么会那样”。 说明 按照Spark应用程序中的driver分布方式不同，Spark on YARN有两种模式： yarn-client模式 阅读全文

摘要： 以下是整理的Spark中的一些配置参数，官方文档请参考Spark Configuration。 Spark提供三个位置用来配置系统： Spark属性：控制大部分的应用程序参数，可以用SparkConf对象或者Java系统属性设置 环境变量：可以通过每个节点的 conf/spark-env.sh脚本设 阅读全文

摘要： 使用密钥文件。 这里假设主机A（192.168.100.3）用来获到主机B（192.168.100.4）的文件。 在主机A上执行如下命令来生成配对密钥： ssh-keygen -t rsa 遇到提示回车默认即可，公钥被存到用户目录下.ssh目录，比如root存放在： /root/.ssh/id_rs 阅读全文

摘要： 一、场景需求 二、Keepalived 简要介绍 Keepalived 是一种高性能的服务器高可用或热备解决方案，Keepalived 可以用来防止服务器单点故障的发生，通过配合 Nginx 可以实现 web 前端服务的高可用。 Keepalived 以 VRRP 协议为实现基础，用 VRRP 协议 阅读全文