随笔分类 -  Hadoop

HBase Java API操作数据库
摘要:场景 CentOS7上搭建Hadoop集群(入门级): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119335883: HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUM 阅读全文
posted @ 2021-08-17 13:18 霸道流氓 阅读(492) 评论(0) 推荐(0)
Hbase报错ERROR: KeeperErrorCode = NoNode for /hbase/master
摘要:场景 CentOS7上搭建Hadoop集群(入门级): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119335883: HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUM 阅读全文
posted @ 2021-08-16 19:36 霸道流氓 阅读(4138) 评论(0) 推荐(0)
HBase Java API 创建表时一直卡住
摘要:场景 HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119511593 在上面搭建起来HBase的分布集群的环境下。 使用JAVA API连接HBASE进行建表操作。 但是运行之后一直就是 阅读全文
posted @ 2021-08-09 19:34 霸道流氓 阅读(436) 评论(1) 推荐(0)
HBase Shell常用的命令
摘要:场景 HBase在CentOS上分布集群安装: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119511593 在上面搭建起来HBase的分布集群环境后,看下HBase Shell的常用命令。 前面我们已经用到HBase She 阅读全文
posted @ 2021-08-08 16:51 霸道流氓 阅读(410) 评论(0) 推荐(0)
MapReduce Java API-使用Partitioner实现输出到多个文件
摘要:场景 MapReduce Java API-多输入路径方式: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119453275 在上面的基础上,怎样用Partitioner的方式实现将学生的成绩数据 分段输出到不同的文件。 例如分 阅读全文
posted @ 2021-08-06 19:27 霸道流氓 阅读(180) 评论(0) 推荐(0)
MapReduce Java API-多输入路径方式
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 在上面实现统计单次出现的频率的基础上。 数据集只是单路径,如果有多个数据集文件,即有多个txt文 阅读全文
posted @ 2021-08-06 13:52 霸道流氓 阅读(117) 评论(0) 推荐(0)
MapReduce Java API实例-排序
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 上面进行项目环境搭建的基础上。 怎样实现对下面这组数据进行排序 注: 博客: https://b 阅读全文
posted @ 2021-08-05 18:28 霸道流氓 阅读(143) 评论(0) 推荐(0)
MapReduce Java API实例-统计平均成绩
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 在上面对单个txt文件进行统计的基础上,Mapreduce也是支持文件夹下多个文件处理的。 统计 阅读全文
posted @ 2021-08-05 16:49 霸道流氓 阅读(556) 评论(0) 推荐(0)
MapReduce Java API实例-统计出现过的单词
摘要:场景 MapReduce Java API实例-统计单词出现频率: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119410169 在上面是统计出现过的单词以及出现的次数。 如果只是从中统计出现过的单词,即类似于求单词集合的并集 阅读全文
posted @ 2021-08-05 11:00 霸道流氓 阅读(97) 评论(0) 推荐(0)
Windows下使用Java API操作HDFS的常用方法
摘要:场景 Windows下配置Hadoop的Java开发环境以及用Java API操作HDFS: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119379055 在上面将Hadoop的开发环境搭建起来之后,使用Java API 简单 阅读全文
posted @ 2021-08-04 13:41 霸道流氓 阅读(370) 评论(0) 推荐(0)
Windows下配置Hadoop的Java开发环境以及用Java API操作HDFS
摘要:场景 HDFS的访问方式之HDFS shell的常用命令: https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119351218 在上面使用HDFS shell的方式去访问HDFS。 那么怎么使用Java API的方式去操作HDFS。 阅读全文
posted @ 2021-08-04 10:53 霸道流氓 阅读(677) 评论(0) 推荐(0)
HDFS的访问方式之HDFS shell的常用命令
摘要:场景 CentOS7上搭建Hadoop集群(入门级): https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/119335883 在上面搭建起来Hadoop集群的基础上,通过HDFS shell的方式访问HDFS的常用命令。 HDFS的访 阅读全文
posted @ 2021-08-03 16:46 霸道流氓 阅读(624) 评论(0) 推荐(0)
CentOS7上搭建Hadoop集群(入门级)
摘要:场景 Hadoop Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架,支持在商品硬件构建的大型集群上运行应用程序。Hadoop是根据Google公司发表的MapReduce和GFS论文自行开发而成的。 Hadoop框架透明地为应用提供可靠性和 阅读全文
posted @ 2021-08-02 23:09 霸道流氓 阅读(797) 评论(0) 推荐(0)