koushr - 博客园

go基础第三篇：context

摘要： 1、带取消的context context.WithCancel(parent Context) (ctx Context, cancel CancelFunc) 传入一个父context，返回一个可以手动取消的子context及其取消函数。我们可以手动调用cancel()函数来取消子contex 阅读全文

posted @ 2021-03-11 11:01 koushr 阅读(116) 评论(0) 推荐(0)

IO多路复用

摘要： IO多路复用是一种同步IO模型，旨在实现一个线程可以监视多个文件句柄。一旦某个文件句柄就绪，就能够通知应用程序进行相应的读写操作。没有文件句柄就绪就会阻塞应用程序，交出CPU。多路是指网络连接，复用指的是同一个线程。多路复用有三种实现方式： 1、select实现 select仅仅知道有IO发生了，阅读全文

posted @ 2020-11-16 20:05 koushr 阅读(569) 评论(0) 推荐(0)

linux基础第五篇：curl、wget、grep使用

摘要： curl curl -v -X GET http://127.0.0.1:9000/helloWorld curl -v -H "Content-Type:application/json" -X POST --data '{"name":"zhangsan"}' http://127.0.0.1: 阅读全文

posted @ 2020-10-20 12:31 koushr 阅读(370) 评论(0) 推荐(0)

linux基础第四篇：查看linux机器cpu、内存、内核等系统信息

摘要： linux服务器的cpu信息在/proc/cpuinfo文件中，内存信息在/proc/meminfo文件中。通过文件可以获得物理cpu的个数、cpu的核数、逻辑cpu的个数查看物理cpu个数： cat /proc/cpuinfo | grep "physical id" | sort | uni 阅读全文

posted @ 2020-09-29 20:09 koushr 阅读(613) 评论(0) 推荐(0)

redis基础第二篇：redis为什么那么快

摘要： 1、纯内存操作。 2、高效的数据结构。 3、使用I/O多路复用模型epoll。见https://www.cnblogs.com/koushr/p/13986873.html 阅读全文

posted @ 2020-09-07 00:44 koushr 阅读(107) 评论(0) 推荐(0)

websocket协议及应用

摘要： websocket协议是一个应用层协议，地位和http协议是一样的。 websocket最主要的作用是实现 <!DOCTYPE html> <html lang="en"> <script> // 向后端发送一个websocket连接请求 let ws = new WebSocket('ws://1 阅读全文

posted @ 2020-09-04 09:57 koushr 阅读(197) 评论(0) 推荐(0)

go基础第二篇：利用pprof定位cpu和内存问题

摘要：在项目的main.go文件中引入 _ "net/http/pprof" 在main函数中加入： go func() { _ = http.ListenAndServe(":6060", nil) }() 保证6060端口能访问到，如在容器中部署的话，别忘了添加端口映射。如果有防火墙的话，别忘了放开端阅读全文

posted @ 2020-07-29 14:45 koushr 阅读(732) 评论(0) 推荐(0)

go基础第一篇：并发之channel

摘要： go不推荐使用共享内存机制，而是推荐使用CSP并发模型机制。 CSP全称是Communicating Sequential Processes，可以翻译成通信顺序进程(Communicating翻译成通信的意思)。简单解释就是，CSP模型由并发执行的实体组成，实体之间通过发送消息进行通信，发送消息时阅读全文

posted @ 2020-07-27 19:05 koushr 阅读(243) 评论(0) 推荐(0)

go基础第一篇：常用语法

摘要：在用for...range遍历string时，第一个参数是字符索引，可能不是连续的，第二个参数是int32类型，即rune类型，rune是int32的别名，第二个参数的值是该字符在unicode字符集中对应的码点，如果字符是中文，那么第二个参数的值将大于255。rune其实就是字符。可以直接用str 阅读全文

posted @ 2020-05-22 18:16 koushr 阅读(430) 评论(0) 推荐(0)

kafka基本概念

摘要： 1、主题 Kafka将一组消息抽象归纳为一个主题（topic），也就是说，一个主题就是对消息的一个分类。生产者将消息发送到特定主题，消费者订阅主题或主题的某些分区进行消费。 2、消息消息是Kafka通信的基本单位，由一个固定长度的消息头和一个可变长度的消息体构成。每一条消息称为Record。 3、阅读全文

posted @ 2020-03-22 13:33 koushr 阅读(349) 评论(0) 推荐(0)

grpc第四篇：grpc-go、grpc-java桩代码生成及服务端、客户端开发

摘要：假设有一个proto文件，内容同https://github.com/grpc/grpc-go/blob/master/examples/helloworld/helloworld/helloworld.proto，如何生成golang或者java的桩代码？生成golang桩代码： 1、安装pro 阅读全文

posted @ 2019-11-26 20:55 koushr 阅读(346) 评论(0) 推荐(0)

kafka副本同步机制

摘要： kafka的复制机制，既不是单纯的同步复制，也不是单纯的异步复制。同步复制要求所有的follower都复制完，这条消息才会被commit，这种复制方式对吞吐率影响较大。异步复制，数据只要被leader写入log就认为已经commit，这种情况下，如果follower都还没有复制完，leader突然宕阅读全文

posted @ 2019-11-26 18:44 koushr 阅读(256) 评论(0) 推荐(0)

shell第五篇：

摘要： RT 阅读全文

posted @ 2019-08-29 11:50 koushr 阅读(365) 评论(0) 推荐(0)

grpc第一篇：What is gRPC

摘要：本文将介绍gRPC和protocol buffers。gRPC可以利用protocol buffers作为其接口定义语言(Interface Definition Language，IDL)和信息交换格式。预览在gRPC中，一个客户端应用可以直接调用不同机器上的服务端应用的方法，就好像调用本地方阅读全文

posted @ 2019-08-29 11:39 koushr 阅读(208) 评论(0) 推荐(0)

事务

摘要： ACID A是atomicity，原子性。 C是consistency，一致性。 I是isolation，隔离性。隔离级别很重要，脏读、不可重复读、幻读，都是隔离级别相关的问题。 D是durability，持久性。下面以mysql数据库详细讲解一下隔离级别。隔离级别有4种，由低到高，依次为Rea 阅读全文

posted @ 2019-07-03 19:45 koushr 阅读(705) 评论(0) 推荐(0)

EFK第一篇：

摘要： https://juejin.cn/post/7088314722432319524 阅读全文

posted @ 2019-06-19 11:53 koushr 阅读(326) 评论(0) 推荐(0)

分布式锁

摘要：分布式锁的使用场景是什么呢？之前红包需求的时候，有一个场景要用到分布式锁。同一个openid，最多只能抢到一个子红包。 1、先判断这个openid在不在该红包对应的已抢openid hash中 String hget(String key, String field); 2、如果在，就返回。如果不阅读全文

posted @ 2019-06-18 23:14 koushr 阅读(711) 评论(0) 推荐(0)

kafka服务端

摘要： kafka服务端的节点称为broker，一个kafka集群有多个broker。每个topic都可以有多个分区，每个分区都可以有多个副本。broker数、分区数、副本数随时可以扩容，这是典型的分布式多副本冗余机制。通过zookeeper从各broker中选出一个作为controller，contro 阅读全文

posted @ 2019-06-02 18:51 koushr 阅读(4509) 评论(0) 推荐(0)

linux基础第二篇：TCP SOCKET的状态

摘要：建立TCP连接的三次握手： 1、client向处于LISTEN状态的server发送SYN后，变为SYN_SENT状态。 2、server收到SYN后，变为SYN_RECV状态，并向client返回SYN_ACK。 3、client收到SYN_ACK后，变为ESTABLISHED状态，并向serve 阅读全文

posted @ 2018-08-15 20:31 koushr 阅读(4889) 评论(0) 推荐(0)

linux基础第一篇：ss、lsof、watch命令使用

摘要： ss ss命令和netstat命令的作用一样，参数也差不多，比netstat快。 ss是Socket Statistics的缩写，意思是套接字统计。 lsof lsof -i:8080 watch watch -n 1 'free -h' 每隔1s执行一次命令阅读全文

posted @ 2018-07-19 09:13 koushr 阅读(565) 评论(0) 推荐(0)

lua基础第一篇：and、or运算

摘要： lua中的and和or，虽说是逻辑运算符，但他们返回的不是布尔值，而是操作数本身： a and b：如果a为false或nil，会返回a，否则返回b。 a or b：如果a为非nil且非false，会返回a，否则返回b。阅读全文

posted @ 2018-06-15 18:44 koushr 阅读(178) 评论(0) 推荐(0)

case when使用

摘要： case when可以用在select后面，也可以用在order后面，也可以用在update后面。 case when语法： case when condition1 then result1 when condition2 then result2 when conditionn then res 阅读全文

posted @ 2018-06-07 21:03 koushr 阅读(638) 评论(0) 推荐(0)

sql笔试题

摘要：题目一、表t_score，数据如下 name subject score 张三语文 81 张三数学 75 李四语文 76 李四数学 90 王五语文 81 王五数学 100 王五英语 90 对应ddl及dml语句如下： CREATE TABLE `t_score` ( `id` int 阅读全文

posted @ 2018-06-07 16:54 koushr 阅读(192) 评论(0) 推荐(0)

case when语法以及与group by的配合使用

摘要：一：case when语法： case when有两种语法：语法1： case 某字段 when 值1 then 伪值1 when 值2 then 伪值2 ...... else 伪值n end 注意，when之间没有任何标点符号，且最后要以end结尾，否则会报语法错误。如有一种常见情况是，数据阅读全文

posted @ 2017-12-17 17:58 koushr 阅读(6960) 评论(0) 推荐(0)

kafka消费组、消费者

摘要：一个消费组可能有一个或者多个消费者。同一个消费组可以订阅一个或者多个主题。主题的某一个分区只能被消费组的某一个消费者消费。那么分区和消费者之间是如何对应的呢？假设消费组cg1(group.id=cg1)订阅了topic1，cg1有3个消费者c1、c2、c3，topic1有5个分区p1、p2、p3、阅读全文

posted @ 2017-10-28 18:40 koushr 阅读(1138) 评论(0) 推荐(0)

单链表和双链表

摘要：单链表英文是singly-linked list，双链表英文是doubly-linked list。单链表的头结点、尾节点有数据吗？双链表的头节点、尾节点有数据吗？其实自己搞混了一个概念，头结点和头指针的概念。阅读全文

posted @ 2017-10-28 18:30 koushr 阅读(281) 评论(0) 推荐(0)

随机id算法

摘要：雪花算法 https://github.com/bwmarrin/snowflake 返回一个64位整数。阅读全文

posted @ 2017-09-07 01:29 koushr 阅读(1652) 评论(0) 推荐(0)

sql语句中开窗函数的使用

摘要： postgresql和8.0版本之后的mysql，均支持开窗函数。开窗函数主要分为两类：一、排序函数： row_number() over(partition by xxx order by yyy) partition by xxx 表示按照xxx字段分区(分区就是分组的意思)，如果没有par 阅读全文

posted @ 2017-09-04 00:11 koushr 阅读(3297) 评论(0) 推荐(1)

mysql一些概念

摘要： buffer pool，缓存池，Innodb引擎缓存数据和索引的内存区域，默认128M。可在mysql命令行客户端执行show variables like 'innodb_buffer_pool_size' 查看。如果可用内存很大，如GB级，那么可以创建多个buffer pool(设置innodb 阅读全文

posted @ 2017-08-06 18:35 koushr 阅读(218) 评论(0) 推荐(0)

redis基础第一篇：一些遗漏命令

摘要： pipeline 如果想连续执行多个redis命令，且后面的命令不依赖于前面命令的结果，则可以把这些命令用pipeline包起来，从而只向redis服务器发起一次情求，在响应中获取所有命令的执行结果，这样可以节省请求响应的往返时间RTT，在应用服务器和redis服务器非局域网时效果尤其显著。 pip 阅读全文

posted @ 2017-07-23 02:11 koushr 阅读(1153) 评论(0) 推荐(0)

rpc核心

摘要：被面试官问过这样一个问题：“假如要你实现一个rpc框架，客户端和服务端你要考虑哪些东西？” rpc框架负责屏蔽底层的传输方式(tcp或者udp)、序列化方式(xml/json/二进制)和通信细节，服务调用者可以像调用本地接口一样调用远程服务，而不需要关心底层通信细节和调用过程。 rpc的组件一般有服阅读全文

posted @ 2017-06-11 16:16 koushr 阅读(243) 评论(0) 推荐(0)

RPC简介

摘要： RPC(Remote Process Call Protocol)，远程过程调用协议，是一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在，如TCP或UDP，为通信程序之间携带信息数据。 RPC采用客户机/服务器模式，请求程序就是一个客户机，而服阅读全文

posted @ 2017-05-24 14:26 koushr 阅读(549) 评论(0) 推荐(0)

分布式一些概念

摘要：分布式系统定义：分布式系统是一个硬件或软件组件分布在不同的网络计算机上，彼此之间仅仅通过消息传递进行通信和协调的系统。分布式系统一些典型的问题：通信异常：分布式系统需要在各个节点之间进行网络通信，因此每次网络通信都会伴随着网络不可用的风险，比如说光纤被挖断了。另外，即使分布式系统各节点之间的阅读全文

posted @ 2017-05-14 00:50 koushr 阅读(381) 评论(0) 推荐(0)

树、二叉树、二叉搜索树、平衡二叉树、B树、B+树、红黑树

摘要：一、树 Tree 树是n个结点的有限集。n=0时称为空树。在任意一棵非空树中：①有且仅有一个根结点；②当n>1时，其余结点可分为m个互不相交的有限集，其中每一个集合本身又是一棵树，称为根的子树。结点的分类结点拥有的子结点的个数称为结点的度。度为0的结点称为叶结点。度不为0的结点称为分支结点。树的阅读全文

posted @ 2017-04-28 11:12 koushr 阅读(688) 评论(0) 推荐(0)

shell第四篇：

摘要： RT 阅读全文

posted @ 2017-04-17 23:38 koushr 阅读(578) 评论(0) 推荐(0)

kafka基本命令行使用

摘要： 1、查看kafka集群有哪些topic： kafka-topics.sh --list --bootstrap-server 172.17.16.4:9092 2、查看kafka集群所有topic分区及其副本情况： kafka-topics.sh --describe --bootstrap-ser 阅读全文

posted @ 2017-04-03 00:25 koushr 阅读(1022) 评论(0) 推荐(0)

git第二篇：CI/CD

摘要：我们可以利用gitlab自带的CI/CD来让代码在提交后自动编译部署。按以下步骤实施即可： 1、在项目根目录中新建.gitlab-ci.yml文件，内容示例如下： stages: - build - package - deploy go-build: image: golang:1.23.1-b 阅读全文

posted @ 2016-10-23 18:49 koushr 阅读(3951) 评论(0) 推荐(0)

linux5种IO模型

摘要： 1、阻塞式IO 2、非阻塞式IO 3、IO多路复用 4、信号驱动式IO 5、异步IO 阅读全文

posted @ 2016-10-22 20:22 koushr 阅读(256) 评论(0) 推荐(0)

nginx基础第三篇：长连接的设置

摘要：考虑一个最常见的场景，client->nginx->upstream 1、client与nginx建立长连接，nginx需要如何配置？ nginx默认与client保持长连接。 https://nginx.org/en/docs/http/ngx_http_core_module.html#keep 阅读全文

posted @ 2016-10-16 15:13 koushr 阅读(315) 评论(0) 推荐(0)

tcp第二篇：四次挥手

摘要：客户端和服务端都可能主动关闭连接。第一步：主动方向被动方发送FIN，关闭主动方到被动方的数据传输，主动方进入FIN_WAIT_1状态。第二步：被动方向主动方发送ACK，被动方进入CLOSE_WAIT状态，主动方进入FIN_WAIT_2状态。第三步：被动方向主动方发送FIN，关闭被动方到主动方的阅读全文

posted @ 2016-04-11 19:34 koushr 阅读(359) 评论(0) 推荐(0)

导航

公告