摘要： 往hive导入数据的几种方式 一、导入数据 1. LOAD DATA(最直接、最常用) -- 从 HDFS 导入（移动文件） LOAD DATA INPATH 'hdfs_path' [OVERWRITE] INTO TABLE table_name [PARTITION(part_col=valu 阅读全文

摘要： Java中异常需要捕获或抛出的场景 1. 调用可能报出受检异常的方法 受检异常： 受检异常（Checked Exception）​ 是一种特殊的异常类型，它会在编译阶段被编译器强制检查，要求开发者 必须显式地处理它，否则代码将 无法通过编译。是 Exception类的子类，但 不是 RuntimeE 阅读全文

摘要： MapReduce的运行机制到底是怎么样的？一起了解一下吧 一、MapReduce的整体架构 Client（客户端） ↓（提交Job） ResourceManager（资源管理器） ↓（分配容器） NodeManager（节点管理器）→ 启动AppMaster（作业管家） ↓（管理任务执行） Map 阅读全文

摘要： MethodArgumentNotValidException 是 Java 中用于处理方法参数不合法情况的异常，通常在使用 Java 的验证框架（如 Hibernate Validator、Bean Validation 等）时出现，用于确保方法的输入参数满足预设的约束条件。 作用 参数验证：该异 阅读全文

摘要： 先讲背景故事 假设你有一个巨型数据工厂（Hadoop集群），早期版本中只有一种车间（MapReduce车间），这个车间既要搬货（资源管理）又要加工零件（数据处理）。结果出现两个问题： 车间主任同时管搬运工和技工，效率低下 只能生产一种产品（无法运行Spark等其他程序） 于是Hadoop在2012年 阅读全文

摘要： 1. 心跳机制是什么？ 心跳机制应该是一种通信机制，可能涉及到节点之间的消息发送和接收。 节点A定期发送心跳给节点B，节点B收到后回复确认，或者节点B在一定时间内没有收到心跳就认为A宕机。然后，考虑各种异常情况，比如网络延迟、丢包、节点突然宕机等。 下面思考心跳机制是如何应对的。 2. 心跳机制的思 阅读全文