认真对待世界的小白

摘要： Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。 Hadoop官方网站：http://hadoop.apache.org/ 一、本地运行模式 1、官方Grep案例 1、创建在hadoop-2.7.2文件下面创建一个input文件夹 [root@centos7 hadoop2.7] 阅读全文

摘要： 一、是什么 Hadoop是一个由Apache基金会所开发的分布式系统基础架构 主要解决，海量数据的存储和海量数据的分析计算问题 广义上来说，Hadoop通常指一个更广泛的概念——Hadoop生态圈 二、Hadoop三大发行版本 Hadoop三大发行版本：Apache、Cloudera、Hortonw 阅读全文

摘要： 一、cut cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。 1、基本用法 cut [选项参数] filename 说明：默认分隔符是制表符 选项参数 功能 -f 列号，提取第几列 -d 分隔符，按照指定分隔符 阅读全文

摘要： 一、read读取控制台输入 1、基本语法 read(选项)(参数) 选项： -p：指定读取值时的提示符； -t：指定读取值时等待的时间（秒）。 参数 变量：指定读取值的变量名 2、案例实操 提示7秒内，读取控制台输入的名称 [root@centos7 shell_test]# touch read. 阅读全文

摘要： 一、运算符 1、基本语法 "$((运算式))" 或 "$[运算式]" expr + , - , \*, /, % 加，减，乘，除，取余 注意：expr 运算符间要有空格 2、案例实操 （1）计算3+2的值 [root@centos7 shell_test]# expr 2 + 3 5 （2）计算3- 阅读全文

摘要： 一、系统变量 1、常用系统变量 $HOME、$PWD、$SHELL、$USER等 2、案例实操 （1）查看系统变量的值 [root@centos7 shell_test]# echo $HOME /root （2）显示当前Shell中所有变量：set [root@centos7 shell_test 阅读全文

摘要： 一、简介 Shell 是一个命令行解释器，它接收应用程序/用户命令，然后调用操作系统内核。Shell 还是一个功能强大的编程语言，易编写、易调试、灵活性强。 二、Shell 解析器 （1）Linux 提供的 Shell 解析器有： [root@centos7 ~]# cat /etc/shells 阅读全文

摘要： 一、自定义全局异常json数据 任何接口都是可能出错，4xx、5xx等 如果业务没有做好统一的错误管理，直接暴露给用户，无疑是看不懂 所以假如后端某个业务出错，Nginx 层也需要进行转换 让前端知道 Http 响应是200，其实是将错误的状态码定向至200，返回了全局兜底数据 location / 阅读全文

摘要： 一、access.log 日志用处 统计站点访问 ip 来源、某个时间段的访问频率 查看访问最频繁的页面、Http 响应状态码、接口性能 接口秒级访问量、分钟访问量、小时和天访问量 ...... 默认配置 #log_format main '$remote_addr - $remote_user [ 阅读全文

摘要： 一、添加pom文件 <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> </dependency> 二、配置文件修改 server: port: 8080 lo 阅读全文