Charles-MQ - 博客园

【CDN+】一些常用的Linux命令，crontab+VI+Hive（持续更新）

摘要：前言本文主要是记录下工作中可能用到的一些linux指令，当作字典查用 Crontab 基本命令 # 安装 yum -y install vixie-cron crontabs#查看状态 service crond status#启动 service crond start#关闭 service c 阅读全文

posted @ 2019-11-13 16:04 Charles-MQ 阅读(370) 评论(0) 推荐(0)

【CDN+】 Spark 的入门学习与运行流程

摘要：前言上文已经介绍了与Spark 息息相关的MapReduce计算模型，那么相对的Spark的优势在哪，有哪些适合大数据的生态呢？ Spark对比MapReduce，Hive引擎，Storm流式计算引擎 1.如果数据超过1T了基本就不能用spark了，还是会选择MapReduce，MapReduce 阅读全文

posted @ 2019-11-12 15:04 Charles-MQ 阅读(372) 评论(0) 推荐(0)

【CDN+】 Spark入门---Handoop 中的MapReduce计算模型

摘要：前言项目中运用了Spark进行Kafka集群下面的数据消费，本文作为一个Spark入门文章/笔记，介绍下Spark基本概念以及MapReduce模型 Spark的基本概念：官网： http://spark.apache.org/ 给出了如下概念 Apache Spark™ is a unifie 阅读全文

posted @ 2019-11-12 14:16 Charles-MQ 阅读(577) 评论(0) 推荐(0)

【CDN+】Kafka 的初步认识与入门

摘要：前言项目中用到了Kafka 这种分布式消息队列来处理日志，本文将对Kafka的基本概念和原理做一些简要阐释 Kafka 的基本概念官网解释： Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常阅读全文

posted @ 2019-11-08 17:31 Charles-MQ 阅读(313) 评论(0) 推荐(0)

【CDN+】 Kylin 的初步认识与理解

摘要：前言项目中用到了Kylin框架来处理数据，那么作为项目成员需要了解哪些关于Kylin的知识呢，本文就Kylin得基本概念和原理进行简述。 Kylin基本概念首先想到的学习路径是Kylin官网： http://kylin.apache.org/cn/ 给出的概念是： Apache Kylin™是一阅读全文

posted @ 2019-11-08 15:44 Charles-MQ 阅读(720) 评论(0) 推荐(0)

【SpringBoot】 Java中如何封装Http请求，以及JSON多层嵌套解析

摘要：前言本文中的内容其实严格来说不算springboot里面的特性，属于JAVA基础，只是我在项目中遇到了，特归纳总结一下。 HTTP请求封装目前JAVA对于HTTP封装主要有三种方式： 1. JAVA原生封装 2. HttpClient 3.X /HttpClient4.X 3. Spring R 阅读全文

posted @ 2019-10-18 10:20 Charles-MQ 阅读(6781) 评论(0) 推荐(0)

Locust 源码理解与分析

摘要：前言相信很多小伙伴会选择Locust作为压测工具辅助测试，本文从Locust源码开始分析它的优劣，结论在最后，最终我还是选择了Jmeter 主要分析了Locust源码的两个文件：main.py 和 runners.py main.py 它执行程序的入口，以下代码仅包含核心代码。 parse_opt 阅读全文

posted @ 2019-10-11 10:38 Charles-MQ 阅读(1923) 评论(0) 推荐(0)

【SpringBoot】理解Spirng中的IOC原理

摘要：前言前文已经介绍了Spring Bean的生命周期，在这个周期内有一个重要的概念就是： IOC容器大家也知道IOC是Sping 的重要核心之一，那么如何理解它呢，它又是产生什么作用呢？本文就IOC原理进行简要阐述。 IOC定义 IoC 全称为 Inversion of Control，翻译为 “ 阅读全文

posted @ 2019-10-10 10:19 Charles-MQ 阅读(3584) 评论(0) 推荐(0)

【SpringBoot】理解SpringBoot的启动原理

摘要：前言前文已经介绍了Spring Bean的生命周期，那么使用过程中发现SpringBoot 的启动非常快捷，本文将介绍SpringBoot的内部启动原理。启动过程如上图所示，我们先分析下SpringBoot的启动类（SpringApplication） Annotation定义（@Sprin 阅读全文

posted @ 2019-10-09 16:34 Charles-MQ 阅读(449) 评论(0) 推荐(0)

【SpringBoot】SpringBoot的基础，全面理解bean的生命周期

摘要：前言前段时间直接上手使用springboot开发了一个数据平台的后台部分，但是自身对于springboot的原理和过程还不是很清晰，所以反过来学习下springboot的基础。大家都知道springboot是基于注解的，IOC和AOP是它的两大重要特性，然后AOP又是基于IOC来实现的。那么弄懂阅读全文

posted @ 2019-10-09 11:14 Charles-MQ 阅读(4970) 评论(0) 推荐(2)