摘要：
1、 创建maven项目 2、 打开项目目录下的pom.xml文件，添加如下依赖 <dependencies> <dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <version>RELEASE</version 阅读全文
posted @ 2021-01-15 10:58
lvtu丶
阅读(258)
评论(0)
推荐(0)
摘要：
解决方案 使用阿里的云仓库 curl -o /etc/yum.repos.d/CentOS-Base.repo https://www.xmpan.com/Centos-6-Vault-Aliyun.repo 清理和构建新缓存 yum clean all yum makecache 阅读全文
posted @ 2021-01-11 14:35
lvtu丶
阅读(151)
评论(0)
推荐(0)
摘要：
1、配置网络环境及jar准备 hadoop-2.7.2-src.tar.gz jdk-8u144-linux-x64.tar.gz apache-ant-1.9.9-bin.tar.gz（build工具，打包用的） apache-maven-3.0.5-bin.tar.gz protobuf-2.5 阅读全文
posted @ 2021-01-11 14:31
lvtu丶
阅读(121)
评论(0)
推荐(0)
摘要：
hdfs 上传小文件到集群 上传大文件到集群 hdfs每个block默认为128m，大于128m的会进行分块存储，下载时为完整下载 文件在hdfs的实际路径 查看HDFS在磁盘存储文件内容 文件删除与验证 阅读全文
posted @ 2021-01-10 14:55
lvtu丶
阅读(134)
评论(0)
推荐(0)
摘要：
虚拟机克隆 a. vim /etc/udev/rules.d/70-persistent-net.rules 更改网卡名 b. vim /etc/sysconfig/network-scripts/ifcfg-eth0 更新网卡 c. vim /etc/sysconfig/network 更改主机名 阅读全文
posted @ 2021-01-09 19:36
lvtu丶
阅读(34)
评论(0)
推荐(0)
摘要：
搭建在单一服务器 基于官方文档 http://hadoop.apache.org/docs/r2.7.2/hadoop-project-dist/hadoop-common/SingleCluster.html#Pseudo-Distributed_Operation 1、配置：hadoop-env 阅读全文
posted @ 2021-01-08 23:31
lvtu丶
阅读(71)
评论(0)
推荐(0)
摘要：
1 克隆centos6、设置网卡 vim /etc/udev/rules.d/70-persistent-net.rules 确定光标所在的位置 d3d删除以下三行，更改NAME为0 vim /etc/sysconfig/network-scripts/ifcfg-eth0 网卡标红的地方做出修改 阅读全文
posted @ 2021-01-07 17:03
lvtu丶
阅读(96)
评论(0)
推荐(0)
摘要：
一般模式 语法 功能描述 yy 复制光标当前一行 y数字y 复制一段（从第几行到第几行） p 箭头移动到目的行粘贴 u 撤销上一步 dd 删除光标当前行 d数字d 删除光标（含）后多少行 x 删除一个字母，相当于del X 删除一个字母，相当于Backspace yw 复制一个词 dw 删除一个词 阅读全文
posted @ 2021-01-07 14:59
lvtu丶
阅读(93)
评论(0)
推荐(0)
摘要：
Hadoop目录结构 重要目录结构： bin目录：存放对Hadoop相关服务（HDFS,YARN）进行操作的脚本 etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件 lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能） sbin目录：存放启动或停止Hadoop相关服务的脚 阅读全文
posted @ 2021-01-07 10:14
lvtu丶
阅读(193)
评论(0)
推荐(0)
摘要：
1、centos6 yum源失效解决方案 下载使用阿里的云仓库 curl -o /etc/yum.repos.d/CentOS-Base.repo https://www.xmpan.com/Centos-6-Vault-Aliyun.repo 清理和构建新缓存 yum clean all yum 阅读全文
posted @ 2021-01-07 09:51
lvtu丶
阅读(92)
评论(0)
推荐(0)
浙公网安备 33010602011771号