techfanyi

摘要： 操作系统系列文章：👉 目录 👈 文章目录 一、硬件支持二、软件支持操作系统的内核程序时钟管理中断机制原语系统控制的数据结构及处理 一、硬件支持 引导程序：位于固件 定位 OS 内核，并将其加载到内存中 指令：CPU 执行事件：硬件中断或软件中断引起执行程序：位于内存程序：位于外存 二、软件支持 阅读全文

摘要： 文章目录 问题描述解决方法 问题描述 IDEA 中使用对 Hive 进行 Maven 配置时出现以下问题 Cannot resolve org.pentaho:pentaho-aggdesigner-algorithm:jar:5.1.5-jhyde 解决方法 ① 找到 Maven reposito 阅读全文

摘要： 操作系统系列文章：👉 目录 👈 文章目录 一、并发（Concurrence）并发与并行 二、共享（Sharing）操作系统的两个最基本特征 三、虚拟（Virtual）实现 “虚拟” 的技术 四、异步（Asynchronism） 一、并发（Concurrence） 并发与并行 并行性 是指两个或多 阅读全文

摘要： 大数据系列文章：👉 目录 👈 文章目录 一、安装 Hive二、启动并使用 Hive 一、安装 Hive ① 使用 Xftp 将 Hive 安装包上传到 虚拟机目录下。 ② 解压 Hive 安装包 tar -zxvf apache-hive-1.2.1-bin.tar.gz ③ 将解压后的安装包移 阅读全文

摘要： 操作系统系列文章：👉 目录 👈 文章目录 一、手工处理阶段1. 人工操作方式1.1 概述1.2 缺点 2. 脱机输入/输出（Offline I/O）方式2.1 概述2.2 优点 二、批处理阶段1. 单道批处理系统1.1 概述1.2 特征1.3 缺点 2. 多道批处理系统2.1 概述2.2 特征2 阅读全文

摘要： 大数据系列文章：👉 目录 👈 文章目录 一、虚拟机环境准备1. 虚拟机网络模式设置为 NAT2. 克隆虚拟机3. 修改虚拟机为静态 IP4. 修改主机名5. 关闭防火墙6. 设置 ssh 免密码登录（只在 Master 这台主机操作） 二、用户及文件权限配置1. 创建用户2. 配置用户具有 ro 阅读全文

摘要： 文章目录 问题描述解决方法 问题描述 Hadoop 运行 jar 包出现以下问题 22/09/03 00:34:34 INFO mapreduce.Job: Task Id : attempt_1662133271274_0002_m_000000_1, Status : FAILED Error: 阅读全文

摘要： 大数据系列文章：👉 目录 👈 文章目录 ① 通过反射获取 RDD 内的 Scheme② 通过编程接口执行 Scheme 在 Spark SQL 中有两种方式可以在 DataFrame 和 RDD 中进行转换： ① 利用反射机制，推导包含某种类型的 RDD，通过反射将其转换为指定类型的 DataF 阅读全文

摘要： 大数据系列文章：👉 目录 👈 文章目录 一、DataFrame SQL 数据操作二、DataFrame API 数据操作 DataFrame 数据操作有两种操作数据的方式，一种是使用 DataFrame所支持的 SQL 语法进行数据操作，另一种使用 DataFrame 提供的相关 API 对数据 阅读全文

摘要： 大数据系列文章：👉 目录 👈 文章目录 一、 开发环境准备二、 创建 DataFrame基于 JSON 文件创建 DataFrame 示例 一、 开发环境准备 在项目的 pom.xml 中添加 Maven 的依赖： <!--Spark SQL 基础依赖--> <dependency> <grou 阅读全文