随笔分类 -  hadoop

摘要：下文展示Java的API如何操作hdfs，在这之前你需要先安装配置好hdfs https://www.cnblogs.com/lay2017/p/9919905.html 依赖 你需要引入依赖如下 配置修改 core-site.xml 由于Java访问hdfs始终都要通过nameNode来拿到dat 阅读全文

摘要：一、准备环境 在配置hdfs之前，我们需要先安装好hadoop的配置，本文主要讲述hdfs单节点的安装配置。 hadoop的单节点安装配置请参考：https://www.cnblogs.com/lay2017/p/9912381.html 二、安装hdfs 配置文件 hadoop安装准备好之后，我们 阅读全文

摘要：一、hadoop简介 相信你或多或少都听过hadoop这个名字，hadoop是一个开源的、分布式软件平台。它主要解决了分布式存储（hdfs）和分布式计算(mapReduce)两个大数据的痛点问题，在hadoop平台上你可以轻易地使用和扩展数千台的计算机而不用关心底层的实现问题。而现在的hadoop更 阅读全文