随笔分类 -  大数据

摘要:最新版mongodb推荐使用yaml语法来做配置,另外一些旧的配置在最新版本中已经不在生效,所以我们在生产实际搭建mongodb集群的时候做了一些改进。如果大家不熟悉什么是分片、副本集、仲裁者的话请先移步查看上一篇文章: "mongodb 3.4 集群搭建:分片+副本集" 和前一个版本相比,改动点有 阅读全文
posted @ 2017-09-21 08:44 纯洁的微笑 阅读(18827) 评论(14) 推荐(12) 编辑
摘要:mongodb是最常用的nodql数据库,在数据库排名中已经上升到了前六。这篇文章介绍如何搭建高可用的mongodb(分片+副本)集群。 在搭建集群之前,需要首先了解几个概念:路由,分片、副本集、配置服务器等。 相关概念 先来看一张图: 从图中可以看到有四个组件:mongos、config serv 阅读全文
posted @ 2017-08-11 09:08 纯洁的微笑 阅读(27714) 评论(17) 推荐(13) 编辑
摘要:HBase shell是HBase的一套命令行工具,类似传统数据中的sql概念,可以使用shell命令来查询HBase中数据的详细情况。安装完HBase之后,如果配置了HBase的环境变量,只要在shell中执行hbase shell就可以进入命令行界面,HBase的搭建可以参考我的上一篇文章:hb 阅读全文
posted @ 2017-08-11 09:07 纯洁的微笑 阅读(62072) 评论(1) 推荐(10) 编辑
摘要:hbase和hadoop一样也分为单机版、伪分布式版和完全分布式集群版本,这篇文件介绍如何搭建完全分布式集群环境搭建。 hbase依赖于hadoop环境,搭建habase之前首先需要搭建好hadoop的完全集群环境,因此看这篇文章之前需要先看我的上一篇文章: "hadoop分布式集群搭建" 。本文中 阅读全文
posted @ 2017-08-11 09:06 纯洁的微笑 阅读(8275) 评论(1) 推荐(1) 编辑
摘要:终于要开始玩大数据了,之前对haoop生态几乎没有太多的了解,现在赶鸭子上架,需要完全使用它来做数据中心,这是我的haoop第一篇文章,以后估计会写很多大数据相关的文章。另外有大数据实践经验的网友请联系我,有问题请教谢谢! Hadoop的搭建有三种方式,单机版适合开发调试;伪分布式版,适合模拟集群学 阅读全文
posted @ 2017-08-11 09:05 纯洁的微笑 阅读(3408) 评论(2) 推荐(0) 编辑