摘要： 大数据集群中通过YARN提交任务的流程及YARN协作机制 1. 任务提交阶段： 客户端向ResourceManager提交应用程序，包括应用程序代码、所需资源（内存、CPU等）和启动命令等信息。 ResourceManager接收应用程序的提交请求，并根据集群资源情况进行调度。 ResourceMa 阅读全文

摘要： SUM(sale_amount) OVER (PARTITION BY salesperson ORDER BY sale_date) 这段 SQL 窗口函数的详细解释和它在执行过程中所发生的具体细节如下： 解析步骤 窗口函数的基础定义： SUM(sale_amount)：表示我们要对 sale_a 阅读全文

摘要： 在 Spring Boot 中，全局异常捕获机制是处理 REST HTTP 请求时的一个重要功能，它可以确保所有未被捕获的异常都能被统一处理。本文将深入探讨 Spring Boot 中全局异常捕获的实现，从请求进入到异常处理的全过程。 请求处理流程概述 请求进入 DispatcherServlet： 阅读全文

摘要： 1. 缓存穿透（Cache Penetration） 定义： 缓存穿透是指恶意请求或异常查询访问缓存中不存在的数据，导致大量请求直接访问后端存储系统。 原因： 查询不存在的数据、恶意攻击等。 解决方案： 使用布隆过滤器预先过滤无效的请求。 缓存空对象或异常结果，避免频繁访问数据库。 2. 缓存击穿（ 阅读全文

摘要： 在分布式系统中,分布式锁是一个重要的概念,用于协调不同节点间的资源访问。本文将详细介绍如何使用Redis实现分布式锁,并探讨其在Spring Cloud中的应用,包括基本实现和使用Redisson库的高级实现。 Redis实现分布式锁的核心原理 Redis实现分布式锁的核心原理基于其单线程特性和原子 阅读全文

摘要： Redis 是一个开源的内存数据结构存储，广泛应用于缓存、会话管理、实时分析等场景。本文将介绍如何在 MacBook 上安装 Redis，并深入探讨其持久化方案的配置，以确保数据的持久性和系统的可靠性。 一、在 MacBook 上安装 Redis 1. 使用 Homebrew 安装 Redis Ho 阅读全文

摘要： Elasticsearch（ES）存储数据的结构 数据结构 Index（索引）： 索引是Elasticsearch中存储数据的基本单位，类似于传统关系型数据库中的数据库。一个索引包含一组具有相同结构的文档。 Document（文档）： 文档是Elasticsearch中存储的基本数据单元，类似于关系 阅读全文

摘要： 高并发是指系统能够同时处理大量并发请求的能力。在现代互联网应用中，高并发是常见的挑战之一，尤其是在电商促销、金融交易、社交媒体和流媒体服务等场景中。那么，到底多高的并发量才算是高并发呢？本文将从多个角度进行探讨。 高并发的衡量标准 高并发的具体标准因应用场景而异，通常使用QPS（每秒查询数）和TPS 阅读全文

摘要： IO与NIO的区别及其应用案例 Java中的IO（Input/Output）和NIO（New Input/Output）是用于处理数据传输的两种不同的API。它们在设计理念、实现方式和适用场景上有显著的差异。本文将详细介绍IO与NIO的区别，并通过实际案例说明如何应用NIO。 IO与NIO的区别 1 阅读全文

摘要： 什么是跨域？ 跨域（Cross-Origin）是指在一个网页中，发起对不同源（域名、协议或端口不同）的资源请求。由于安全原因，浏览器默认会阻止这种跨域请求，这是因为同源策略（Same-Origin Policy）的限制。同源策略是浏览器的一种安全机制，用于防止不同来源的资源之间的恶意交互。 同源策略 阅读全文