摘要:传统的文件拷贝 传统的读取文件数据并发送到网络的步骤如下: (1)操作系统将数据从磁盘文件中读取到内核空间的页面缓存; (2)应用程序将数据从内核空间读入用户空间缓冲区; (3)应用程序将读到数据写回内核空间并放入socket缓冲区; (4)操作系统将数据从socket缓冲区复制到网卡接口,此时数据 阅读全文
posted @ 2020-03-23 22:30 鄙人取个名字好难 阅读 (12) 评论 (0) 编辑
摘要:producer以及consumer如何知道该去哪个broker传送以及消费数据 producer可以指定一个或者多个broker的信息(ip:port),来获取kafka集群的元信息(最好多指定几个,否则这个broker连接不上了,就over了)。每个broker,topic有多少partitio 阅读全文
posted @ 2020-03-23 21:29 鄙人取个名字好难 阅读 (9) 评论 (0) 编辑
摘要:查看kafka版本 进入kafka安装目录 ... kafka/libs,看到类似kafka_2.12-2.0.0.jar这样的文件,2.12为scala版本,2.0.0是kafka版本(kafka使用了Scala进行开发). zookeeper-server-start.sh 参照 kafka环境 阅读全文
posted @ 2020-03-22 21:08 鄙人取个名字好难 阅读 (10) 评论 (0) 编辑
摘要:命令替换$() 在bash中,$( )与` `(反引号)都是用来作命令替换的。 命令替换与变量替换差不多,都是用来重组命令行的,先完成引号里的命令行,然后将其结果替换出来,再重组成新的命令行。$( )的弊端是,并不是所有的类unix系统都支持这种方式,但反引号是肯定支持的。 root@dev02:/ 阅读全文
posted @ 2020-03-13 21:30 鄙人取个名字好难 阅读 (27) 评论 (0) 编辑
摘要:条件判断:if语句 if [ expression ] then command; fi注意:expression 和方括号[ ]之间必须有空格,否则会有语法错误 其他格式: if ... else ... fi 语句 if ... elif ... else ... fi 语句 eg: root@ 阅读全文
posted @ 2020-03-13 20:14 鄙人取个名字好难 阅读 (10) 评论 (0) 编辑
摘要:GREP grep命令是Globally search a Regular Expression and Print的缩写,表示进行全局的正则匹配并进行打印。grep的相关扩展命令包括egrep和fgrep,其中egrep支持更多的正则匹配,fgrep只进行字符的匹配,不支持正则表达式。 grep 阅读全文
posted @ 2020-03-11 20:40 鄙人取个名字好难 阅读 (5) 评论 (0) 编辑
摘要:变量 变量不需要声明 等号的两边不能有空格 变量调用:$a 或者 ${a}。{}的作用是区分和其他字符连接使用,比如 ${a}ook 变量 变量含义 $0 返回文件名 $1-$9 返回第一个-第九个参数 $* 返回所有的参数 $# 返回参数的个数 $? 判断上一条命令是否执行成功.(0:成功 非0: 阅读全文
posted @ 2020-03-09 22:23 鄙人取个名字好难 阅读 (14) 评论 (0) 编辑
摘要:Nginx集群原理 虚拟主机:接受和响应用户请求 反向代理:带用户去数据服务器拿数据 upstream:告诉Nginx去哪个数据服务器拿数据 Nginx集群分发算法 轮询:每个请求按时间顺序逐一分配到不同的后端服务器,如果后端服务器down掉,能自动剔除 权重:指定轮询几率,weight和访问比率成 阅读全文
posted @ 2020-03-08 14:43 鄙人取个名字好难 阅读 (11) 评论 (0) 编辑
摘要:1.调整 worker_processes nginx 进程数,可以按照逻辑cpu 数目来指定 # 查看物理CPU个数 cat /proc/cpuinfo| grep "physical id"| sort| uniq| wc -l # 查看每个物理CPU中core的个数(即核数) cat /pro 阅读全文
posted @ 2020-03-06 20:53 鄙人取个名字好难 阅读 (8) 评论 (0) 编辑
摘要:url重写是指通过配置conf文件,以让网站的url中达到某种状态时则定向/跳转到某个规则,比如常见的伪静态、301重定向、浏览器定向等。 Rewrite功能的实现是依赖于PCRE(perl兼容的正则表达式)的支持,所以在编译安装Nginx之前,需要安装PCRE库 Rewrite模块语法 1.set 阅读全文
posted @ 2020-03-06 17:38 鄙人取个名字好难 阅读 (15) 评论 (0) 编辑