随笔分类 -  Hadoop

摘要:在客户端输入Hadoop fs,可以查看所有的,hadoop shell HDFS 的shell练习 阅读全文
posted @ 2017-12-20 12:39 nbfujx 阅读(290) 评论(0) 推荐(0)
摘要:单节点 单节点:https://hub.docker.com/r/cloudera/quickstart/ 相关命令 docker pull cloudera/quickstart:latest docker run --privileged=true --hostname=quickstart.c 阅读全文
posted @ 2017-12-20 08:58 nbfujx 阅读(5066) 评论(1) 推荐(0)
摘要:1.运行环境 开发工具:PyCharm Python 版本:3.5 Hadoop环境: Cloudera QuickStart 2.GITHUB地址 https://github.com/nbfujx/hadoop-learn-demo/tree/master/python-hadoop-hdfs 阅读全文
posted @ 2017-12-20 08:33 nbfujx 阅读(424) 评论(0) 推荐(0)
摘要:1.运行环境 开发工具:intellij idea JDK版本:1.8 项目管理工具:Maven 4.0.0 Hadoop环境: Cloudera QuickStart 2.GITHUB地址 https://github.com/nbfujx/hadoop-learn-demo/tree/maste 阅读全文
posted @ 2017-12-19 17:49 nbfujx 阅读(329) 评论(0) 推荐(0)
摘要:简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性 阅读全文
posted @ 2017-12-18 16:04 nbfujx 阅读(216) 评论(0) 推荐(0)
摘要:关于CDH和Cloudera Manager CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境。 C 阅读全文
posted @ 2017-11-13 14:05 nbfujx 阅读(1215) 评论(0) 推荐(0)