08 2018 档案

Hbase-2.0.0_04_Hbase原理
摘要:参考博客:Hadoop HBase概念学习系列 参考博客:Hadoop HBase概念学习系列之HBase里的Zookeeper(二十一) 参考博客:Hadoop HBase概念学习系列之HBase里的客户端和HBase集群建立连接(详细)(十四) 参考博客:Hadoop HBase概念学习系列之M 阅读全文

posted @ 2018-08-20 16:14 踏歌行666 阅读(670) 评论(0) 推荐(0)

Hbase-2.0.0_03_Hbase数据模型
摘要:1. hbase数据模型 1.1. HBase数据模型术语 Table HBase表由多行组成。 Row HBase中的一行由一个行键和一个或多个列组成,列的值与这些列相关联。存储行时,按行键按字母顺序排列。因此,行键的设计非常重要。目标是以这样一种方式存储数据,即相关的行彼此接近。常见的行键模式是 阅读全文

posted @ 2018-08-20 15:54 踏歌行666 阅读(797) 评论(0) 推荐(0)

Hbase-2.0.0_02_常用操作
摘要:主要是常用的hbase shell命令,包括表的创建与删除,表数据的增删查【hbase没有修改】;以及hbase的导出与导入。 参考教程:HBase教程 参考博客:hbase shell基础和常用命令详解 参考博客:hbase shell常用命令和filter 参考博客:hbase导入导出数据 1. 阅读全文

posted @ 2018-08-19 17:59 踏歌行666 阅读(685) 评论(0) 推荐(0)

Hbase-2.0.0_01_安装部署
摘要:该文章是基于 Hadoop2.7.6_01_部署 进行的 1. 主机规划 主机名称 IP信息 内网IP 操作系统 安装软件 备注:运行程序 mini01 10.0.0.11 172.16.1.11 CentOS 7.4 jdk、hadoop、zookeeper、hbase QuorumPeerMai 阅读全文

posted @ 2018-08-17 08:21 踏歌行666 阅读(1835) 评论(0) 推荐(0)

Sqoop-1.4.7-部署与常见案例
摘要:该文章是基于 Hadoop2.7.6_01_部署 、 Hive-1.2.1_01_安装部署 进行的 1. 前言 在一个完整的大数据处理系统中,除了hdfs+mapreduce+hive组成分析系统的核心之外,还需要数据采集、结果数据导出、任务调度等不可或缺的辅助系统,而这些辅助工具在hadoop生态 阅读全文

posted @ 2018-08-05 22:14 踏歌行666 阅读(2163) 评论(0) 推荐(0)

Azkaban-2.5.0-部署与常见案例
摘要:该文章是基于 Hadoop2.7.6_01_部署 、 Hive-1.2.1_01_安装部署 进行的 1. 前言 在一个完整的大数据处理系统中,除了hdfs+mapreduce+hive组成分析系统的核心之外,还需要数据采集、结果数据导出、任务调度等不可或缺的辅助系统,而这些辅助工具在hadoop生态 阅读全文

posted @ 2018-08-03 17:32 踏歌行666 阅读(1421) 评论(0) 推荐(0)

Flume-1.8.0_部署与常用案例
摘要:该文章是基于 Hadoop2.7.6_01_部署 进行的 Flume官方文档:FlumeUserGuide 常见问题:记flume部署过程中遇到的问题以及解决方法(持续更新) 1. 前言 在一个完整的大数据处理系统中,除了hdfs+mapreduce+hive组成分析系统的核心之外,还需要数据采集、 阅读全文

posted @ 2018-08-01 19:30 踏歌行666 阅读(830) 评论(0) 推荐(0)

导航