会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
coder
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
6
7
8
9
10
11
下一页
2019年8月13日
CDH搭建大数据集群(5.10.0)
摘要: 纠结了好久,还是花钱了3个4核8G的阿里云主机,且行且珍惜,想必手动搭建过Hadoop集群的完全分布式、HBase的完全分布式的你(当然包括我,哈哈),一定会抱怨如此多的配置,而此时CDH正是解决我们烦恼的时候。 下面安装过程比较长,所以一定要有耐心。 一、CDH介绍 以下是官网给的介绍:个人感觉就
阅读全文
posted @ 2019-08-13 08:44 coder、
阅读(9885)
评论(18)
推荐(6)
2019年8月8日
PXE无人值守实现批量化自动安装Linux系统
摘要: 设想一个场景:假如让你给1000台服务器装系统,你会怎么做?跑去每一台服务器给它安装系统吗?显然不会。。 一、概括 通过网络引导系统的做法可以不必从硬盘、软盘或CD-ROM硬盘,而是完全通过网络来引导一台计算机。这对于安装来说非常方便,因为它意味着你可以坐在桌子旁边,不必走到机器那里插入CD-ROM
阅读全文
posted @ 2019-08-08 12:05 coder、
阅读(4708)
评论(0)
推荐(0)
2019年8月7日
Hive的mysql安装配置
摘要: 一、MySQL的安装 Hive的数据,是存在HDFS里的。此外,hive有哪些数据库,每个数据库有哪些表,这样的信息称之为hive的元数据信息。 元数据信息不存在HDFS,而是存在关系型数据库里,hive默认用的是derby数据库来存储。即hive工作时,除了要依赖Hadoop,还要依赖关系型数据库
阅读全文
posted @ 2019-08-07 23:43 coder、
阅读(5921)
评论(0)
推荐(0)
Linux下的MySQL安装
摘要: 一、安装说明 ①下载mysql的安装包 我这里已经放入网盘:https://pan.baidu.com/s/1Orl71Tk9J-TIznGaJuldhQ https://pan.baidu.com/s/1ElUU4mg0SBlupfUantu5yA ②确认当前环境是否安装过mysql rpm -q
阅读全文
posted @ 2019-08-07 23:20 coder、
阅读(812)
评论(0)
推荐(0)
Hive的安装与基础指令
摘要: 一、Hive安装 Hive的安装相对比较简单,Hive是基于Hadoop来使用的,所以搭建Hadoop伪分布式或完全分布式即可,Hive安装过程如下: ①安装并启动Hadoop 在博主的其他博客中有安装说明:Hadoop之伪分布式安装 ②获取Hive安装包,并解压 下载地址:https://mirr
阅读全文
posted @ 2019-08-07 22:44 coder、
阅读(276)
评论(0)
推荐(0)
浅谈数据库和数据仓库
摘要: 一、数据库和数据仓库 二、OLTP和OLAP对比 ①OLTP(OnLine Transaction Processing)和OLAP(OnLine Analytical Processing) 数据库属于OLTP系统(联机事务处理系统),覆盖了企业大部分的日常操作,比如:购物、库存、银行、工资、记账
阅读全文
posted @ 2019-08-07 22:13 coder、
阅读(387)
评论(0)
推荐(1)
Hive的学习之路(理论篇)
摘要: 一、Hive介绍 Apache官网给出的logo,一半是Hadoop大象的头,一半是蜜蜂的身体,也是寓意着它是基于Hadoop,哈哈,纯属个人理解,进入正题。 Hive是基于Hadoop的一个数据仓库工具,可以将sql语句转换成MapReduce任务来运行。可以用来数据提取、转化、加载(ETL),这
阅读全文
posted @ 2019-08-07 21:51 coder、
阅读(1124)
评论(1)
推荐(1)
HBase的完全分布式搭建
摘要: 一、HBase的安装模式 ①单机安装:不依赖于Hadoop的HDFS,配置完即可使用,好处是便于测试,坏处是不具备分布式数据存储的能力。 ②伪分布式安装:单台主机模拟真实环境。 ③完全分布式安装:多台主机(虚拟机)来搭建 二、搭建准备 ①搭建Hadoop+JDK+ZooKeeper(3个zookee
阅读全文
posted @ 2019-08-07 16:26 coder、
阅读(1464)
评论(0)
推荐(0)
2019年8月3日
研究Zookeeper的原理(二)
摘要: 阅读声明:以下内容是结合网上材料及工作内容所写的个人理解,如有不当,欢迎大家指正~~~谢谢啦 一、ZooKeeper的选举机制、FailOver机制 我们知道ZooKeeper在分布式环境中协调服务,如果宕机,那么整体的协调服务失效,所以单台ZooKeeper存在单点故障问题,由此我们引入ZooKe
阅读全文
posted @ 2019-08-03 13:46 coder、
阅读(208)
评论(0)
推荐(0)
研究Zookeeper的原理(一)
摘要: 阅读声明:以下内容是结合网上材料所写个人理解,如有不当,欢迎大家指正~~~谢谢 一、Zookeeper介绍 zookeeper,见名知意嘛,zoo动物园,keeper保持者、管理员,结合起来就是动物管理员,为什么这么说呢?不放大家可以看一看目前大数据技术:比如Hadoop的logo是一个黄色的大象、
阅读全文
posted @ 2019-08-03 13:14 coder、
阅读(395)
评论(0)
推荐(0)
上一页
1
···
6
7
8
9
10
11
下一页
公告