摘要: API操作 Shell操作是在集群内部,即hadoop102上进行操作,API操作是希望在Windows上能远程连接集群实现增删改查操作 一、客户端环境准备 1、找到资料包路径下的Windows依赖文件夹,拷贝hadoop-3.1.0到非中文路径 2、在Windows上配置HADOOP_HOME环境 阅读全文
posted @ 2024-09-14 17:03 一年都在冬眠 阅读(205) 评论(0) 推荐(0)
摘要: Shell操作 一、基本语法 hadoop fs 具体命令 hdfs dfs 具体命令 二、命令大全 [user@hadoop102 ~]$ hadoop fs Usage: hadoop fs [generic options] [-appendToFile <localsrc> ... <dst 阅读全文
posted @ 2024-09-14 10:42 一年都在冬眠 阅读(56) 评论(0) 推荐(0)
摘要: HDFS概述 一、产生背景和定义 1、产生背景 一个操作系统存不下所有的数据,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的件,这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。 2、定义 HDFS(Hadoop Distribute 阅读全文
posted @ 2024-09-14 09:21 一年都在冬眠 阅读(101) 评论(0) 推荐(0)