摘要: 1.1 MapReduce定义: Mapreduce是一个分布式运算程序的编程框架,是用户开发“基于hadoop的数据分析应用”的核心框架。 Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个hadoop集群上。 1.2 MapReduc 阅读全文
posted @ 2020-11-27 17:04 chyi花花 阅读(470) 评论(0) 推荐(0)
摘要: 1:hadoop是什么? hadoop是apache旗下的一套开源软件平台, hadoop提供的功能有:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理。 Hadoop的核心组件有:HDFS(分布式文件系统)YARN(运算资源调度系统) MAPREDUCE(分布式运算编程框架) 广 阅读全文
posted @ 2020-11-22 15:33 chyi花花 阅读(181) 评论(0) 推荐(0)