摘要： 如果要全面的使用spark，你可能要安装如JDK，scala，hadoop等好些东西。可有时候我们只是为了简单地安装和测试来感受一下spark的使用，并不需要那么全面。对于这样的需要，我们其实只要安装好JDK，然后下载配置spark，两步即可。 本文选择： 1、centos 2、JDK1.8 3、s 阅读全文

摘要： 在上文中https://www.cnblogs.com/lay2017/p/9973370.html 我们通过hive shell去操作hive，本文我们以Java代码的示例去对hive执行加载数据和查询数据来演示JavaAPI如何通过JDBC来操作hive的 hive client的更多内容可以参 阅读全文

摘要： 在使用hive shell之前我们需要先安装hive，并启动hdfs 请参考：https://www.cnblogs.com/lay2017/p/9973298.html hive shell 我们先进入安装目录 使用Hive命令启动hive shell 查看一下数据库，发现有一个默认的defaul 阅读全文

摘要： hive是一个数据仓库工具，建立在hadoop之上，它的存在是为了让大数据的查询和分析更加的方便。hive提供简单的sql查询功能，并最终转换为mapreduce任务执行。 一、环境 JDK1.8+官方推荐新版JDK，否则可能存在不同版本不兼容问题 hadoop采用2.0+版本，否则hive2.0+ 阅读全文

摘要： hbase是Java编写的，当然也提供了Java的API来操作hbase。 如果你是使用虚拟机来安装配置hbase那么你需要配置一下hostname，不然JavaAPI访问虚拟机的时候会无法连接，请参考： https://www.cnblogs.com/lay2017/p/9953371.html 阅读全文

摘要： 一般上我们在局域网内访问，比如宿主机访问虚拟机的时候可以直接使用IP去访问，大多数情况下也都适用。但是对于有的情况，比如像新版的hbase的配置，它默认将localhost作为hbase.master，这样导致你在宿主机无法使用客户端API去访问它，很是头疼。当然，对于生产环境来说hbase这样强制 阅读全文

摘要： hbase单节点安装请参考： https://www.cnblogs.com/lay2017/p/9944387.html 下文演示hbase shell工具常用的命令，首先启动hbase以及进入shell 进入shell如下 注意：xshell进入hbase的shell以后如果无法使用backsp 阅读全文

摘要： 下文将快速构建并启动单节点hbase，不使用hdfs作为存储，不使用独立的zookeeper hbase官网：http://hbase.apache.org/ 一、JDK环境 hbase需要JDK环境作为前提，所以在你的linux系统中首先要安装JDK，参考： https://www.cnblogs 阅读全文

摘要： 下文展示Java的API如何操作hdfs，在这之前你需要先安装配置好hdfs https://www.cnblogs.com/lay2017/p/9919905.html 依赖 你需要引入依赖如下 配置修改 core-site.xml 由于Java访问hdfs始终都要通过nameNode来拿到dat 阅读全文

摘要： 一、准备环境 在配置hdfs之前，我们需要先安装好hadoop的配置，本文主要讲述hdfs单节点的安装配置。 hadoop的单节点安装配置请参考：https://www.cnblogs.com/lay2017/p/9912381.html 二、安装hdfs 配置文件 hadoop安装准备好之后，我们 阅读全文