2019年12月6日
摘要:
MapReduce简介MapReduce是面向大数据并行处理的计算模型、框架和平台,它隐含了以下三层含义: 1)MapReduce是一个基于集群的高性能并行计算平台(Cluster Infrastructure)。它允许用市场上普通的商用服务器构成一个包含数十、数百至数千个节点的分布和并行计算集群。
阅读全文
posted @ 2019-12-06 23:43
大鹏的鸿鹄之志
阅读(11276)
推荐(1)
2019年11月26日
摘要:
以下是 Python 内置异常类的层次结构:BaseException+-- SystemExit+-- KeyboardInterrupt+-- GeneratorExit+-- Exception +-- StopIteration +-- ArithmeticError | +-- Float
阅读全文
posted @ 2019-11-26 00:11
大鹏的鸿鹄之志
阅读(297)
推荐(0)
2019年11月21日
摘要:
转载:https://blog.csdn.net/WYpersist/article/details/80102778 MapReduce简介MapReduce是面向大数据并行处理的计算模型、框架和平台,它隐含了以下三层含义: 1)MapReduce是一个基于集群的高性能并行计算平台(Cluster
阅读全文
posted @ 2019-11-21 23:45
大鹏的鸿鹄之志
阅读(692)
推荐(0)
posted @ 2019-11-21 21:57
大鹏的鸿鹄之志
阅读(144)
推荐(0)
2019年11月20日
摘要:
转载:https://blog.csdn.net/henlf/article/details/82085685 https://blog.csdn.net/uniquecapo/article/details/79292965 https://blog.csdn.net/yuan_xw/articl
阅读全文
posted @ 2019-11-20 23:49
大鹏的鸿鹄之志
阅读(140)
推荐(0)
2019年11月17日
posted @ 2019-11-17 11:56
大鹏的鸿鹄之志
阅读(76)
推荐(0)
2019年11月13日
摘要:
sqoop的功能是什么?有什么特点? Sqoop(SQL-to-Hadoop)是一个在结构化数据和Hadoop之间进行批量数据迁移的工具,结构化数据可以是Mysql、Oracle等RDBMS。Sqoop底层用MapReduce程序实现抽取、转换、加载,MapReduce天生的特性保证了并行化和高容错
阅读全文
posted @ 2019-11-13 20:09
大鹏的鸿鹄之志
阅读(222)
推荐(0)
2019年11月12日
摘要:
https://blog.csdn.net/yangyin007/article/details/82382779
阅读全文
posted @ 2019-11-12 21:03
大鹏的鸿鹄之志
阅读(83)
推荐(0)
2019年11月9日
posted @ 2019-11-09 20:50
大鹏的鸿鹄之志
阅读(118)
推荐(0)
摘要:
一.hadoop是什么 Hadoop被公认是一套行业大数据标准开源软件,在分布式环境下提供了海量数据的处理能力。几乎所有主流厂商都围绕Hadoop开发工具、开源软件、商业化工具和技术服务。今年大型IT公司,如EMC、Microsoft、Intel、Teradata、Cisco都明显增加了Hadoop
阅读全文
posted @ 2019-11-09 20:48
大鹏的鸿鹄之志
阅读(2087)
推荐(0)