摘要:数据库同步的管道架构 MySQL作为数据库的核心能力范围就是在线业务的事务处理和查询访问。因此无论单体应用也好,微服务也好,都会以多连接请求的形式,将业务数据写入MySQL;作为专业的Elasticsearch,往往在整个过程中,扮演着从MySQL复制数据、建立索引、提供搜索的角色。这是最普遍存在的 阅读全文
posted @ 2021-03-31 12:17 读字节 阅读(72) 评论(0) 推荐(0) 编辑
摘要:SOA是一种软件的应用架构方法,它基于面向对象,但又不是面向对象,整体上是面向服务的架构。SOA由精确的服务定义、松散的构件服务组成,以及业务流程调用等多个方面形成的一整套架构方法。 这话是不是听起来,让人觉得有点晕,我们就细细品读一下。 SOA的架构思想 (一)SOA架构是面向服务的,只不过是基于 阅读全文
posted @ 2021-03-30 18:59 读字节 阅读(441) 评论(0) 推荐(1) 编辑
摘要:一、Redis的分布式结构解读 首先redis采用去中心化的设计这个理解是不到位的。redis分布式的模式,具有主从和集群两种,redis社区的集群方案redis cluster采用的是去中心化设计。我们先看看redis的演化过程: 上图是标准的Redis主从模式,只有Master接收写入请求,并将 阅读全文
posted @ 2021-03-14 12:25 读字节 阅读(84) 评论(0) 推荐(0) 编辑
摘要:视频地址 B站视频地址:Logstash如何成为镇得住场面的数据管道 公众号视频地址:Logstash如何成为镇得住场面的数据管道 知乎视频地址:Logstash如何成为镇得住场面的数据管道 内容 首先我们延续上一期视频中日志采集架构的案例,Filebeat采集日志并推送Kafka消息队列进行分发, 阅读全文
posted @ 2021-03-14 12:11 读字节 阅读(86) 评论(0) 推荐(0) 编辑
摘要:内容参考 对分布式对定义参考这篇文章: 微服务都想用,先把分布式和微服务之间的关系说清楚 对分布式架构中心或无中心对比参考这篇文章: 分布式存储单主、多主和无中心架构的特征与趋势 对HDFS对内部机制参考这篇文章: Hadoop分布式文件系统I/O原理机制的深度解读 分布式文件系统HDFS无索引就无 阅读全文
posted @ 2021-03-10 22:33 读字节 阅读(68) 评论(0) 推荐(0) 编辑
摘要:通过看到一种火热的技术现象,会产生对事物的一种浅层认知后,然后再深入理解去获得一个比较深刻的认识。 大数据具有社会化,技术性的重要特点。 从社会化看 先说这个“大”,也就是大数据最早的定义:速度、类型和容量,所谓的3V。实际上大数据的发展早已经突破了这个定义。数据体现的不是所谓的“大小”,而是规模。 阅读全文
posted @ 2021-03-09 18:25 读字节 阅读(59) 评论(0) 推荐(0) 编辑
摘要:视频地址: B站视频地址:ELK和Kafka是怎么就玩在一起成了日志采集解决方案 公众号视频地址:ELK和Kafka是怎么就玩在一起成了日志采集解决方案 知乎视频地址:ELK和Kafka是怎么就玩在一起成了日志采集解决方案 视频文字版 今天呢我就带来了一期视频,主要就是讲ELK和Kafka之间的通讯 阅读全文
posted @ 2021-03-09 17:18 读字节 阅读(328) 评论(0) 推荐(0) 编辑
摘要:一、分布式和微服务架构的定义 分布式应用场景涵盖的面非常广,我理解的部分: 不同进程之间的互相通信, 不同主机的分布式对象之间调用, 用于大数据存储的分布式文件系统, 用于网络之间相互识别的命名服务, 集群中计算或存储的无中心对等模型, 分布式事务, 数据副本在分布式环境中的复制, 云计算服务, 音 阅读全文
posted @ 2021-03-08 13:33 读字节 阅读(932) 评论(0) 推荐(2) 编辑
摘要:我大概2000年上大学在宿舍开始玩Linux,到现在20年了!也算是最早一批痴迷于Linux桌面用户啦!记得当时的毕业设计BBS论坛开发就是在Mandrake Linux(后改名Mandriva,一种继承自Redhat体系面向桌面的软件)上面完成的,为了下载三张700M的iso镜像,拿着硬盘跑到网吧 阅读全文
posted @ 2021-03-06 11:48 读字节 阅读(1426) 评论(19) 推荐(4) 编辑
摘要:分布式对象存储和分布式文件系统具有很强烈的对比性 分布式对象存储是key/value的存储模式,以restful访问方式为主,几乎处于扁平化的存储形式,通过地址作为主键,访问、更新的文件对象作为值。文件本身可以分布式分片,但是key/value的访问都是原子性,文件不能追加数据,亦不能随机访问文件的 阅读全文
posted @ 2021-03-02 22:00 读字节 阅读(97) 评论(0) 推荐(0) 编辑