摘要:Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。 Redis 是一个高性能的key-value数据库。 redis的出现,很大程度补偿了memcached这类key/value存储的不足,在部 分场合可以对关系 阅读全文
rabbitMQ--快速入门
2016-04-09 21:33 by 一个爱学习的小码农, 8915 阅读, 1 推荐, 收藏,
摘要:1、简介 MQ全称为Message Queue, 消息队列(MQ)是一种应用程序对应用程序的通信方法。应用程序通过读写出入队列的消息(针对应用程序的数据)来通信,而无需专用连接来链接它们。消息传递指的是程序之间通过在消息中发送数据进行通信,而不是通过直接调用彼此来通信,直接调用通常是用于诸如远程过程 阅读全文
Python简介
2016-04-09 15:16 by 一个爱学习的小码农, 160 阅读, 0 推荐, 收藏,
摘要:1.Python基础 1.1Python 标识符 1).python中的标识符是区分大小写的 2).以单下划线开头(_foo)的代表不能直接访问的类属性,需通过类提供的接口进行访问,不能用"from xxx import *"而导入; 3).以双下划线开头的(__foo)代表类的私有成员;以双下划线 阅读全文
hive基本操作
2016-04-07 07:12 by 一个爱学习的小码农, 148 阅读, 0 推荐, 收藏,
摘要:创建表:hive> CREATE TABLE pokes (foo INT, bar STRING); Creates a table called pokes with two columns, the first being an integer and the other a string创建 阅读全文
Hbase初识
2016-04-06 20:22 by 一个爱学习的小码农, 159 阅读, 0 推荐, 收藏,
摘要:HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。是建立的hdfs之上,提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统。 与hadoop一样,Hbase目标主要 阅读全文
Map/Reduce简单样例----wordcount
2016-04-06 07:23 by 一个爱学习的小码农, 458 阅读, 0 推荐, 收藏,
摘要:1.1 MapReduce编程模型 MapReduce采用"分而治之"的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成,然后通过整合各个节点的中间结果,得到最终结果。简单地说,MapReduce就是"任务的分解与结果的汇总"。 在Hadoop中,用于执行MapReduce任 阅读全文
Hadoop的核心--Map/Reduce
2016-04-05 23:13 by 一个爱学习的小码农, 1293 阅读, 0 推荐, 收藏,
摘要:Hadoop的核心就是HDFS和MapReduce,而两者只是理论基础,不是具体可使用的高级应用,Hadoop旗下有很多经典子项目,比如HBase、Hive等,这些都是基于HDFS和MapReduce发展出来的。要想了解Hadoop,就必须知道HDFS和MapReduce是什么。 MapReduce 阅读全文
Hadoop的核心--HDFS
2016-04-05 22:40 by 一个爱学习的小码农, 517 阅读, 0 推荐, 收藏,
摘要:Hadoop的核心就是HDFS和MapReduce,而两者只是理论基础,不是具体可使用的高级应用,Hadoop旗下有很多经典子项目,比如HBase、Hive等,这些都是基于HDFS和MapReduce发展出来的。要想了解Hadoop,就必须知道HDFS和MapReduce是什么。 1.概要 HDFS 阅读全文
浙公网安备 33010602011771号