01 2025 档案

1.31
摘要：启动命令 start-dfs.sh start-yarn.sh zkServer.sh start #三台虚拟机都要启动 start-hbase.sh hbase shell #然后就可以输入命令，exit退出 关闭命令 exit stop-hbase.sh zkServer.sh stop #三台 阅读全文
posted @ 2025-01-31 15:56 徐星凯 阅读(15) 评论(0) 推荐(0)
1.29
摘要：python 一门编程语言 Anaconda 装Python环境的盒子 numpy、pytorch、opencv python的包，可以提供很多工具 全局搜索 Anaconda Prompt 查看conda信息，输入指令 conda info 查看python环境 conda env list 创建 阅读全文
posted @ 2025-01-29 21:18 徐星凯 阅读(14) 评论(0) 推荐(0)
1.25
摘要：01图层的概念 02图层的种类 03图层编辑工具 04图层混合选项 05调整图层 06图层混合模式 07图层筛选按钮 08图层锁定工具 阅读全文
posted @ 2025-01-25 19:28 徐星凯 阅读(13) 评论(0) 推荐(0)
1.24
摘要：# 第一种： Local 方式启动 Spark cd /export/server/spark bin/spark-sql --master local[2] --conf spark.sql.shuffle.partitions=2 # 第二种：Standalone 方式启动 Spark cd / 阅读全文
posted @ 2025-01-24 19:28 徐星凯 阅读(20) 评论(0) 推荐(0)
1.23
摘要：reactive在修改响应式对象的时候，要用Object.assign(car,{brand: 'xiaomi' , price : 20}) 需要一个基本类型的响应式数据，必须使用ref 需要响应式对象，且层级不深，ref,reactive都可以 需要一个响应式对象，层级较深，推荐用reactiv 阅读全文
posted @ 2025-01-23 19:28 徐星凯 阅读(16) 评论(0) 推荐(0)
1.22
摘要：use MuZhaoDi db.grade.insertMany([ { courseName: "ComputerNetwork", score: 99, teacher: "HuYingXin", examDate: "2024/6" }, { courseName: "MaoGai", sco 阅读全文
posted @ 2025-01-22 19:27 徐星凯 阅读(15) 评论(0) 推荐(0)
1.21
摘要：<script setup lang="ts"> import {computed, onMounted, ref} from "vue"; import {getScjhService, getWorkerService, getProcessService, addWorkInfoService 阅读全文
posted @ 2025-01-21 19:27 徐星凯 阅读(13) 评论(0) 推荐(0)
1.20
摘要：start-all.sh nohup /export/server/apache-hive-3.1.2-bin/bin/hive --service metastore & nohup /export/server/apache-hive-3.1.2-bin/bin/hive --service h 阅读全文
posted @ 2025-01-20 19:27 徐星凯 阅读(14) 评论(0) 推荐(0)
1.19
摘要：<script setup lang="ts"> import {computed, ref} from "vue"; import {getScjhService,getWorkerService,getProcessService,addWorkInfoService} from "@/api/ 阅读全文
posted @ 2025-01-19 19:27 徐星凯 阅读(21) 评论(0) 推荐(0)
1.18
摘要：/** * Base64 工具类 */ public class Base64Util { private static final char last2byte = (char) Integer.parseInt("00000011", 2); private static final char 阅读全文
posted @ 2025-01-18 19:27 徐星凯 阅读(22) 评论(0) 推荐(0)
1.13
摘要：package com.example.mesweb; import com.example.mesweb.utils.DatabaseConnection; import javax.servlet.ServletException; import javax.servlet.annotation 阅读全文
posted @ 2025-01-13 19:43 徐星凯 阅读(15) 评论(0) 推荐(0)
1.12
摘要：# Spark ## 1.1 ***用于大规模数据处理的统一分析引擎*** **Spark的架构角色**： *资源管理层面：* Master:集群资源管理 Worker:单机资源管理 *任务运行层面：* Driver:单个任务的管理 Executor:单个任务的计算 Spark解决的问题： 海量的数 阅读全文
posted @ 2025-01-12 21:27 徐星凯 阅读(8) 评论(0) 推荐(0)
1.11
摘要：## Hive ### MetaStore #### 前台启动 ~~~cmd /export/server/apache-hive-3.1.2-bin/bin/hive --service metastore ~~~ **会一直占据前台，按下Ctrl+C关闭** #### 后台启动 ~~~cmd n 阅读全文
posted @ 2025-01-11 19:13 徐星凯 阅读(19) 评论(0) 推荐(0)
1.9
摘要：HDFS集群-分布式存储 YARN集群-资源管理调度 MapReduce-计算框架（代码层面的组件） ## Hadoop集群的启停命令（只在node1中操作即可） ### HDFS集群 ~~~cmd start-dfs.sh stop-dfs.sh ~~~ ### YARN集群 ~~~cmd sta 阅读全文
posted @ 2025-01-09 22:14 徐星凯 阅读(22) 评论(0) 推荐(0)
1.7
摘要：# 解压安装包 tar -zxvf /export/server/spark-2.4.5-bin-hadoop2.7.tgz # 创建软连接，方便后期升级 ln -s /export/server/spark-2.4.5-bin-hadoop2.7 /export/server/spark # 如果 阅读全文
posted @ 2025-01-07 21:28 徐星凯 阅读(12) 评论(0) 推荐(0)