随笔分类 - Hadoop
HBase Java API操作数据库
摘要:场景 CentOS7上搭建Hadoop集群(入门级): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119335883: HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUM
阅读全文
Hbase报错ERROR: KeeperErrorCode = NoNode for /hbase/master
摘要:场景 CentOS7上搭建Hadoop集群(入门级): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119335883: HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUM
阅读全文
HBase Java API 创建表时一直卡住
摘要:场景 HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119511593 在上面搭建起来HBase的分布集群的环境下。 使用JAVA API连接HBASE进行建表操作。 但是运行之后一直就是
阅读全文
HBase Shell常用的命令
摘要:场景 HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119511593 在上面搭建起来HBase的分布集群环境后,看下HBase Shell的常用命令。 前面我们已经用到HBase She
阅读全文
MapReduce Java API-使用Partitioner实现输出到多个文件
摘要:场景 MapReduce Java API-多输入路径方式: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119453275 在上面的基础上,怎样用Partitioner的方式实现将学生的成绩数据 分段输出到不同的文件。 例如分
阅读全文
MapReduce Java API-多输入路径方式
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 在上面实现统计单次出现的频率的基础上。 数据集只是单路径,如果有多个数据集文件,即有多个txt文
阅读全文
MapReduce Java API实例-排序
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 上面进行项目环境搭建的基础上。 怎样实现对下面这组数据进行排序 注: 博客: https://b
阅读全文
MapReduce Java API实例-统计平均成绩
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 在上面对单个txt文件进行统计的基础上,Mapreduce也是支持文件夹下多个文件处理的。 统计
阅读全文
MapReduce Java API实例-统计出现过的单词
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 在上面是统计出现过的单词以及出现的次数。 如果只是从中统计出现过的单词,即类似于求单词集合的并集
阅读全文
Windows下使用Java API操作HDFS的常用方法
摘要:场景 Windows下配置Hadoop的Java开发环境以及用Java API操作HDFS: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119379055 在上面将Hadoop的开发环境搭建起来之后,使用Java API 简单
阅读全文
Windows下配置Hadoop的Java开发环境以及用Java API操作HDFS
摘要:场景 HDFS的访问方式之HDFS shell的常用命令: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119351218 在上面使用HDFS shell的方式去访问HDFS。 那么怎么使用Java API的方式去操作HDFS。
阅读全文
HDFS的访问方式之HDFS shell的常用命令
摘要:场景 CentOS7上搭建Hadoop集群(入门级): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119335883 在上面搭建起来Hadoop集群的基础上,通过HDFS shell的方式访问HDFS的常用命令。 HDFS的访
阅读全文
CentOS7上搭建Hadoop集群(入门级)
摘要:场景 Hadoop Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架,支持在商品硬件构建的大型集群上运行应用程序。Hadoop是根据Google公司发表的MapReduce和GFS论文自行开发而成的。 Hadoop框架透明地为应用提供可靠性和
阅读全文
浙公网安备 33010602011771号