2019年8月31日
hdfs的客户端操作
摘要： hdfs的客户端操作 hdfs的客户端有多种形式： 网页形式 命令行形式 客户端在哪里运行，没有约束，只要运行客户端的机器能够跟hdfs集群联网 文件的切块大小和存储的副本数量，都是由客户端决定！ 所谓的由客户端决定，是通过配置参数来定的 hdfs的客户端会读以下两个参数，来决定切块大小、副本数量： 阅读全文
posted @ 2019-08-31 12:47 东东w 阅读(1149) 评论(0) 推荐(0)
hdfs运行机制
摘要： hdfs：分布式文件系统 hdfs有着文件系统共同的特征： 1、有目录结构，顶层目录是： / 2、系统中存放的就是文件 3、系统可以提供对文件的：创建、删除、修改、查看、移动等功能 hdfs跟普通的单机文件系统有区别： 1、单机文件系统中存放的文件，是在一台机器的操作系统中 2、hdfs的文件系统会 阅读全文
posted @ 2019-08-31 08:15 东东w 阅读(539) 评论(0) 推荐(0)
大数据概念
摘要： 什么是大数据 基本概念 在互联网技术发展到现今阶段，大量日常、工作等事务产生的数据都已经信息化，人类产生的数据量相比以前有了爆炸式的增长，以前的传统的数据处理技术已经无法胜任，需求催生技术，一套用来处理海量数据的软件工具应运而生，这就是大数据！ 换个角度说，大数据是： 1、有海量的数据 2、有对海量 阅读全文
posted @ 2019-08-31 08:13 东东w 阅读(282) 评论(0) 推荐(0)