摘要: hive入门到精通 hive部署 启动Hadoop # 启动hadoop start-all.sh # 检查hadoop进程 jps # 检查各端口 netstat -aplnt | grep java 检查MySQL是否启动成功 ps -aux | grep mysql netstat -apln 阅读全文
posted @ 2023-05-16 10:52 JD_L 阅读(145) 评论(0) 推荐(1) 编辑
摘要: 大数据面试(个人总结含答案) 大数据面试题 Hadoop 分布式系统基础架构,主要是为了解决海量数据的存储和和海量数据的分析计算问题 Hadoop的特点 高可靠性:Hadoop底层维护多个数据副本,即使Hadoop某个计算元素或存储出现故障,也不会 导致数据的丢失 高扩展性:集群分配任务数据,可方便扩展数以千计的节点 高效性:并 阅读全文
posted @ 2023-05-13 16:21 JD_L 阅读(207) 评论(0) 推荐(0) 编辑
摘要: Scala 只是学习无基本理论 安装Scala 装前必须有jdk windows安装 解压缩 D:dev/scala 配置环境变量 SCALA_HONE path cmd检查 Scala -version 直接输入Scala 控制台运行 idea安装与运行Scala idea-->插件-->scal 阅读全文
posted @ 2023-05-10 21:01 JD_L 阅读(28) 评论(0) 推荐(0) 编辑
摘要: openEuler Linux 部署 Zookeeper 集群 openEuler Linux 部署 Zookeeper 集群 | 主机名 | IP地址 | | | | | spark01 | 192.168.28.11 | | spark02 | 192.168.28.12 | | spark03 阅读全文
posted @ 2023-04-11 21:44 JD_L 阅读(17) 评论(0) 推荐(0) 编辑
摘要: openEuler 单机部署 Hadoop SingleNode 模式 升级操作系统和软件 yum -y update 升级后建议重启 安装常用软件 yum -y install gcc gcc-c++ autoconf automake cmake make rsync openssh-serve 阅读全文
posted @ 2023-04-11 21:44 JD_L 阅读(12) 评论(0) 推荐(0) 编辑
摘要: OpenEuler Linux 部署 HadoopHA openEuler Linux 部署 HadoopHA | 主机名 | IP地址 | | | | | spark01 | 192.168.28.11 | | spark02 | 192.168.28.12 | | spark03 | 192.1 阅读全文
posted @ 2023-04-11 21:43 JD_L 阅读(37) 评论(0) 推荐(0) 编辑
摘要: zookeeper shell zookeeper shell zookeeper 存储结构类似于Linux文件系统 使用根结构 node 不是文件也不是目录 客户端命令行 # 连接本地服务 zkCli.sh # 连接其他节点 zkCli.sh -server spark02:2181 # 这里并不 阅读全文
posted @ 2023-04-11 21:42 JD_L 阅读(11) 评论(0) 推荐(0) 编辑
摘要: 已知出生年月日,求到今天为止多少岁 select *, --如果当前月份大于出生月,年龄 = 当前年份 - 出生年 if (month(current_date())-month(substr(id_card,7,8))>0, year(current_date())-year(substr(id_ 阅读全文
posted @ 2023-04-04 21:04 JD_L 阅读(128) 评论(0) 推荐(0) 编辑
摘要: 1.pwd 查看当前所在位置 2.ls 查看或显示目录 ls -l 以列表模式查看目录 ls -a 显示所有文件和目录,包括隐藏的无论文件还是文件夹,前缀前加点都代表隐藏 ls -al 多个参数可联合使用 3.clear 清空屏幕 CTRL + L 清空当前行 CTRL + U 清空屏幕 4.cd 阅读全文
posted @ 2023-03-28 17:21 JD_L 阅读(47) 评论(0) 推荐(0) 编辑
摘要: 操作系统 移动端 安卓 iOS 鸿蒙 其他工业系统 桌面端 Windows MaciOS Unix Linux 服务器 Unix Linux 购买主机 阿里云 腾讯云 华为云 其他云平台 虚拟机 宿主主机 物理硬件 CPU 内存 硬盘 操作系统 Mac Windows 虚拟机 Virtual Box 阅读全文
posted @ 2023-03-28 17:15 JD_L 阅读(134) 评论(0) 推荐(0) 编辑