摘要:
解答:索引数据的规划,应在前期做好规划,正所谓“设计先行,编码在后”, 这样才能有效的避免突如其来的数据激增导致集群处理能力不足引发的线上客户 检索或者其他业务受到影响。 如何调优,正如问题 1 所说,这里细化一下: 3.1 动态索引层面 基于模板+时间+rollover api 滚动创建索引,举例 阅读全文
posted @ 2020-06-20 19:43
咔啡
阅读(971)
评论(0)
推荐(0)
摘要:
Reactive Extensions 也称为 Rx。这是一种设计方法,我们通过调用多个服务来 收集结果,然后编译组合响应。这些调用可以是同步或异步,阻塞或非阻塞。Rx 是分布式系统中非常流行的工具,与传统流程相反。 阅读全文
posted @ 2020-06-20 19:28
咔啡
阅读(160)
评论(0)
推荐(0)
摘要:
Zookeeper 提供一个多层级的节点命名空间(节点称为 znode)。与文件系统不 同的是,这些节点都可以设置关联的数据,而文件系统中只有文件节点可以存放 数据而目录节点不行。 Zookeeper 为了保证高吞吐和低延迟,在内存中维护了这个树状的目录结构,这 种特性使得 Zookeeper 不能 阅读全文
posted @ 2020-06-20 19:25
咔啡
阅读(175)
评论(0)
推荐(0)
摘要:
1)一级缓存: 基于 PerpetualCache 的 HashMap 本地缓存,其存储作用域为 Session,当 Session flush 或 close 之后,该 Session 中的所有 Cache 就 将清空,默认打开一级缓存。 2)二级缓存与一级缓存其机制相同,默认也是采用 Perpe 阅读全文
posted @ 2020-06-20 19:04
咔啡
阅读(127)
评论(0)
推荐(0)
摘要:
客户端 SendThread 线程接收事件通知,交由 EventThread 线程回调 Watcher。 客户端的 Watcher 机制同样是一次性的,一旦被触发后,该 Watcher 就失效了。 阅读全文
posted @ 2020-06-20 19:02
咔啡
阅读(163)
评论(0)
推荐(0)
摘要:
容器是管理基于微服务的应用程序以便单独开发和部署它们的好方法。您可以将 微服务封装在容器映像及其依赖项中,然后可以使用它来滚动按需实例的微服务, 而无需任何额外的工作。 阅读全文
posted @ 2020-06-20 18:40
咔啡
阅读(233)
评论(0)
推荐(0)
摘要:
持续集成(CI)是每次团队成员提交版本控制更改时自动构建和测试代码的过程。 这鼓励开发人员通过在每个小任务完成后将更改合并到共享版本控制存储库来共 享代码和单元测试。 阅读全文
posted @ 2020-06-20 18:38
咔啡
阅读(356)
评论(0)
推荐(0)
摘要:
Zookeeper 是一个典型的发布/订阅模式的分布式数据管理与协调框架,开发人员 可以使用它来进行分布式数据的发布和订阅。 通过对 Zookeeper 中丰富的数据节点进行交叉使用,配合 Watcher 事件通知机 制,可以非常方便的构建一系列分布式应用中年都会涉及的核心功能,如: 1、数据发布/ 阅读全文
posted @ 2020-06-20 17:57
咔啡
阅读(210)
评论(0)
推荐(0)
摘要:
Java 中的 Semaphore 是一种新的同步类,它是一个计数信号。从概念上讲,从 概念上讲,信号量维护了一个许可集合。如有必要,在许可可用前会阻塞每一个 acquire(),然后再获取该许可。每个 release()添加一个许可,从而可能释放一个 正在阻塞的获取者。但是,不使用实际的许可对象, 阅读全文
posted @ 2020-06-20 17:24
咔啡
阅读(338)
评论(0)
推荐(0)
摘要:
面试官:想了解应聘者之前公司接触的 ES 使用场景、规模,有没有做过比较大 规模的索引设计、规划、调优。 解答: 如实结合自己的实践场景回答即可。 比如:ES 集群架构 13 个节点,索引根据通道不同共 20+索引,根据日期,每日 递增 20+,索引:10 分片,每日递增 1 亿+数据, 每个通道每 阅读全文
posted @ 2020-06-20 17:15
咔啡
阅读(414)
评论(0)
推荐(0)
摘要:
Dubbo 框架在初始化和通信过程中使用了多种设计模式,可灵活控制类加载、权 限控制等功能。 工厂模式 Provider 在 export 服务时,会调用 ServiceConfig 的 export 方法。ServiceConfig 中有个字段: private static final Prot 阅读全文
posted @ 2020-06-20 17:08
咔啡
阅读(162)
评论(0)
推荐(0)
摘要:
早期的 Memcached 内存管理方式是通过 malloc 的分配的内存,使用完后通过 free 来回收内存,这种方式容易产生内存碎片,并降低操作系统对内存的管理效 率。加重操作系统内存管理器的负担,最坏的情况下,会导致操作系统比 memcached 进程本身还慢,为了解决这个问题,Slab Al 阅读全文
posted @ 2020-06-20 16:49
咔啡
阅读(171)
评论(0)
推荐(0)
摘要:
UGO(User/Group/Others) 目前在 Linux/Unix 文件系统中使用,也是使用最广泛的权限控制方式。是一种粗 粒度的文件系统权限控制模式。 ACL(Access Control List)访问控制列表 包括三个方面: 权限模式(Scheme) 1、IP:从 IP 地址粒度进行权 阅读全文
posted @ 2020-06-20 13:00
咔啡
阅读(803)
评论(0)
推荐(0)
摘要:
推荐使用 Zookeeper 作为注册中心,还有 Redis、Multicast、Simple 注册中心,但不推荐。 阅读全文
posted @ 2020-06-20 12:40
咔啡
阅读(464)
评论(0)
推荐(0)
摘要:
根据微服务架构在各方面的要素,看看 Spring Cloud 和 Dubbo 都提供了哪些支持。 Dubbo Spring Cloud 服务注册中心 Zookeep er Spring Cloud Netflix Eureka 服务调用方式 RPC REST API 服务网关 无 Spring Cl 阅读全文
posted @ 2020-06-20 12:39
咔啡
阅读(564)
评论(0)
推荐(0)
摘要:
采用多版本开发,不影响旧版本。 阅读全文
posted @ 2020-06-20 12:38
咔啡
阅读(302)
评论(0)
推荐(0)
摘要:
接口服务层(Service):该层与业务逻辑相关,根据 provider 和 consumer 的 业务设计对应的接口和实现 配置层(Config):对外配置接口,以 ServiceConfig 和 ReferenceConfig 为 中心 服务代理层(Proxy):服务接口透明代理,生成服务的客户 阅读全文
posted @ 2020-06-20 12:37
咔啡
阅读(327)
评论(0)
推荐(0)
摘要:
chubby 是 google 的,完全实现 paxos 算法,不开源。zookeeper 是 chubby的开源实现,使用 zab 协议,paxos 算法的变种。 阅读全文
posted @ 2020-06-20 12:08
咔啡
阅读(533)
评论(0)
推荐(0)
摘要:
集群容错方案 说明 Failover Cluster 失败自动切换,自动重试其它服务器(默认) Failfast Cluster 快速失败,立即报错,只发起一次调用 Failsafe Cluster 失败安全,出现异常时,直接忽略 Failback Cluster 失败自动恢复,记录失败请求,定时重 阅读全文
posted @ 2020-06-20 12:06
咔啡
阅读(459)
评论(0)
推荐(0)
摘要:
配置 配置说明 dubbo:service 服务配置 dubbo:reference 引用配置 dubbo:protocol 协议配置 dubbo:applicatio n 应用配置 dubbo:module 模块配置 dubbo:registry 注册中心配置 dubbo:monitor 监控中心 阅读全文
posted @ 2020-06-20 11:57
咔啡
阅读(171)
评论(0)
推荐(0)
摘要:
其实就是水平扩容了,Zookeeper 在这方面不太好。两种方式: 全部重启:关闭所有 Zookeeper 服务,修改配置之后启动。不影响之前客户端的 会话。 逐个重启:在过半存活即可用的原则下,一台机器重启不影响整个集群对外提供 服务。这是比较常用的方式。 3.5 版本开始支持动态扩容。 阅读全文
posted @ 2020-06-20 11:19
咔啡
阅读(162)
评论(0)
推荐(0)
摘要:
推荐使用 Hessian 序列化,还有 Duddo、FastJson、Java 自带序列化。 阅读全文
posted @ 2020-06-20 11:10
咔啡
阅读(230)
评论(0)
推荐(0)
摘要:
可以用版本号(version)过渡,多个不同版本的服务注册到注册中心,版本号不同的服务相互间不引用。这个和服务分组的概念有一点类似。 阅读全文
posted @ 2020-06-20 10:58
咔啡
阅读(216)
评论(0)
推荐(0)
摘要:
为了提高数据访问的速度。Dubbo 提供了声明式缓存,以减少用户加缓存的工作量 <dubbo:reference cache="true" /> 其实比普通的配置文件就多了一个标签 cache="true" 阅读全文
posted @ 2020-06-20 10:55
咔啡
阅读(456)
评论(0)
推荐(0)
摘要:
关于二进制最好的信息当然是二进制协议规范: 二进制协议尝试为端提供一个更有效的、可靠的协议,减少客户端/服务器端因处 理协议而产生的 CPU 时间。 根据 Facebook 的测试,解析 ASCII 协议是 memcached 中消耗 CPU 时间最多的 环节。所以,我们为什么不改进 ASCII 协 阅读全文
posted @ 2020-06-20 10:43
咔啡
阅读(303)
评论(0)
推荐(0)
摘要:
dubbo 服务发布之后,我们可以利用 telnet 命令进行调试、管理。 Dubbo2.0.5 以上版本服务提供端口支持 telnet 命令 连接服务 telnet localhost 20880 //键入回车进入 Dubbo 命令模式。 查看服务列表 dubbo>ls com.test.Test 阅读全文
posted @ 2020-06-20 10:39
咔啡
阅读(173)
评论(0)
推荐(0)
摘要:
JDK SPI JDK 标准的 SPI 会一次性加载所有的扩展实现,如果有的扩展吃实话很耗时,但 也没用上,很浪费资源。 所以只希望加载某个的实现,就不现实了 DUBBO SPI 1,对 Dubbo 进行扩展,不需要改动 Dubbo 的源码 2,延迟加载,可以一次只加载自己想要加载的扩展实现。 3, 阅读全文
posted @ 2020-06-20 10:26
咔啡
阅读(1248)
评论(0)
推荐(0)
摘要:
Dubbo 必须依赖 JDK,其他为可选。 阅读全文
posted @ 2020-06-20 10:22
咔啡
阅读(193)
评论(0)
推荐(0)
摘要:
解答:通俗解释一下就可以。 传统的我们的检索是通过文章,逐个遍历找到对应关键词的位置。 而倒排索引,是通过分词策略,形成了词和文章的映射关系表,这种词典+映射表 即为倒排索引。 有了倒排索引,就能实现 o(1)时间复杂度的效率检索文章了,极大的提高了 检索效率。 学术的解答方式: 倒排索引,相反于一 阅读全文
posted @ 2020-06-20 10:21
咔啡
阅读(517)
评论(0)
推荐(0)
摘要:
Dubbox 是继 Dubbo 停止维护后,当当网基于 Dubbo 做的一个扩展项目,如 加了服务可 Restful 调用,更新了开源组件等。 阅读全文
posted @ 2020-06-20 10:20
咔啡
阅读(212)
评论(0)
推荐(0)
摘要:
别的还有 spring 的 spring cloud,facebook 的 thrift,twitter 的 finagle 等 阅读全文
posted @ 2020-06-20 10:18
咔啡
阅读(112)
评论(0)
推荐(0)
摘要:
这里的索引文档应该理解为文档写入 ES,创建索引的过程。 文档写入包含:单文档写入和批量 bulk 写入,这里只解释一下:单文档写入流程。 记住官方文档中的这个图。 第一步:客户写集群某节点写入数据,发送请求。(如果没有指定路由/协调节点, 请求的节点扮演路由节点的角色。)第二步:节点 1 接受到请 阅读全文
posted @ 2020-06-20 09:39
咔啡
阅读(573)
评论(0)
推荐(0)
摘要:
协调节点默认使用文档 ID 参与计算(也支持通过 routing),以便为路由提供合适的分片。 shard = hash(document_id) % (num_of_primary_shards) 1、当分片所在的节点接收到来自协调节点的请求后,会将请求写入到 Memory Buffer,然后定时 阅读全文
posted @ 2020-06-20 09:37
咔啡
阅读(750)
评论(0)
推荐(0)
摘要:
1、关闭缓存 swap; 2、堆内存设置为:Min(节点内存/2, 32GB); 3、设置最大文件句柄数; 4、线程池+队列大小根据业务需要做调整; 5、磁盘存储 raid 方式——存储有条件使用 RAID10,增加单节点性能以及避免单节点存储故障。 阅读全文
posted @ 2020-06-20 09:27
咔啡
阅读(205)
评论(0)
推荐(0)
摘要:
Lucene 是有索引和搜索的两个过程,包含索引创建,索引,搜索三个要点。可以基于这个脉络展开一些。 最近面试一些公司,被问到的关于 Elasticsearch 和搜索引擎相关的问题,以及自己总结的回答。 阅读全文
posted @ 2020-06-20 09:23
咔啡
阅读(474)
评论(0)
推荐(0)

浙公网安备 33010602011771号