jpy

摘要： 概述 如何选择 如果数据通过Window自带的记事本软件打开，我们还可以读懂里面的内容，就使用字符流，否则使用字节流。 如果你不知道该使用哪种类型的流,就使用字节流。 字节流 字符流 字节流 InputStream 方法名 解释 abstract int read() 从输入流中读取数据的下一个字节 阅读全文

摘要： 概述 特性 无侵入：只做增强不做改变，引入它不会对现有工程产生影响，如丝般顺滑 损耗小：启动即会自动注入基本 CURD，性能基本无损耗，直接面向对象操作 强大的 CRUD 操作：内置通用 Mapper、通用 Service，仅仅通过少量配置即可实现单表大部分 CRUD 操作，更有强大的条件构造器，满 阅读全文

摘要： 命令行工具 消费组管理 #所有消费组 ./kafka-consumer-groups.sh --bootstrap-server 192.168.0.191:9092 --list #消费组详情 ./kafka-consumer-groups.sh --bootstrap-server 192.16 阅读全文

摘要： 简介 官网：http://shiro.apache.org/ 功能 Authentication：身份认证，登陆，验证用户是不是拥有相应身份 Authorization：授权，即权限验证 Session Manger：会话管理，用户登陆后就是一次会话，没退出之前，所有信息都在会话中，会话可以是Jav 阅读全文

摘要： SpringSecurity（安全） 在web开发者，安全第一位！过滤器，拦截器！ shiro，SpringSecurity 认证，授权 功能权限 访问权限 菜单权限 简介 SpringSecurity是针对Spring项目的安全框架，也是Spring Boot底层安全模块默认的技术选型，它可以实现 阅读全文

摘要： kafka的消息传输机制很直观,如果生产者向broker发送消息,commit之后.会被存到副本里面,他就不会丢失了. 如果在发送之后,网络出现问题,producer无法判断消息是否commit了,但是可以retry多次,直到确认已经在broker那commit.也就是至少一次,at least o 阅读全文

摘要： 存储结构 概述 每一个partition(文件夹)相当于一个巨型文件被平均分配到多个大小相等的segment数据文件里 但每一个segment file消息数量不一定相等，这样的特性方便old segment file告诉被删除（默认每一个文件大小1G，可以在server.properties 中l 阅读全文

摘要： 分区概述 主题划分为多个分区，根据分区规则将消息存到不同分区。配置合理的分区规则， 实现负载均衡和水平扩展。 多个订阅者可以从一个或多个分区同时消费数据，以支撑海量数据处理。 消息是追加到分区的，多个分区顺序写磁盘的效率比随机写内存效率高，是kafka高吞吐保证。 副本机制 Producer和Con 阅读全文

摘要： 主题 创建主题 手动创建 命令（kafka的bin目录下）：kafka-topics.sh -zookeeper localhost:2181 --create --topic topicname --partitions 2 --replication-factor 1 localhost:218 阅读全文

摘要： 相关概念 消费者和消费组 同一个消费组内的每个消费者会收到不同分区的消息，消费者和分区1对多 应用需要不同的消费组，每个应用可以读取到一个主题内所有分区的消息 消息接收 必要参数设置 key，value的反序列化 集群清单，bootstrap.servers 消费组，group.id，默认为空，会抛 阅读全文