07 2018 档案
HDFS的java操作
摘要：搭建开发环境 1、引入依赖 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifactId> <version>2.6.1</version> </dependency> 2、window 阅读全文
posted @ 2018-07-30 21:36 wuyl 阅读(373) 评论(0) 推荐(0)
HDFS工作原理笔记
摘要：什么是HDFS，有什么特点特性 它是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件. 其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色； 特性: （1）HDFS中的文件在物理上是分块存储（block），块的大小可以通过配置参数( dfs.blocks 阅读全文
posted @ 2018-07-30 21:33 wuyl 阅读(198) 评论(0) 推荐(0)
win10已经编译好的hadoop2.6.5
摘要：win10已经编译好的hadoop2.6.5 https://pan.baidu.com/s/1kmzzBcMsf2g4stPZ4hZL_g 阅读全文
posted @ 2018-07-28 23:56 wuyl 阅读(749) 评论(0) 推荐(0)
HDFS常用命令收集，来云百度的一个txt
摘要：-help 功能：输出这个命令参数手册 -ls 功能：显示目录信息 示例： hadoop fs -ls hdfs://hadoop-server01:9000/ 备注：这些参数中，所有的hdfs路径都可以简写 -->hadoop fs -ls / 等同于上一条命令的效果 -mkdir 功能：在hdf 阅读全文
posted @ 2018-07-28 16:38 wuyl 阅读(248) 评论(0) 推荐(0)
hadoop 集群搭建 基础配置测试
摘要：1、首先准备4台能上网的机器，主机名叫shizhan01,shizhan02,shizhan03,shizhan04 2、修改主机名和IP的映射关系 vim /etc/hosts 如下： 每一台机器都要配置 192.168.137.200 shizhan01192.168.137.201 shizh 阅读全文
posted @ 2018-07-28 15:42 wuyl 阅读(435) 评论(0) 推荐(0)
java8 疯狂java讲义
摘要：https://pan.baidu.com/s/19XKQcYqgwVJCwMVFPG3_Gw 阅读全文
posted @ 2018-07-22 23:29 wuyl 阅读(226) 评论(0) 推荐(0)
ZOOKEEPER基础教程
摘要：Zookeeper概念简介： Zookeeper是一个分布式协调服务；就是为用户的分布式应用程序提供协调服务 1、zookeeper是为别的分布式程序服务的(比如服务管理、心跳检查、配置信息管理) 2、Zookeeper本身就是一个分布式程序（只要有半数以上节点存活，zk就能正常服务） 3、Zook 阅读全文
posted @ 2018-07-18 18:48 wuyl 阅读(2224) 评论(0) 推荐(0)
本地yum仓库的安装配置通过一个Apache作为私有仓库，供局域网内使用
摘要：1、本地yum仓库的安装配置两种方式： 1、每一台机器都配一个本地文件系统上的yum仓库 file:///packege/path/2、在局域网内部配置一台节点(server-base)的本地文件系统yum仓库，然后将其发布到web服务器中， 其他节点就可以通过http://server-base/ 阅读全文
posted @ 2018-07-15 09:09 wuyl 阅读(162) 评论(0) 推荐(0)