学习中_1

2021年12月7日

摘要：任务一：导入JFinal工程选择Maven项目导入选择刚刚下载的demo 导入完成按照教程启动启动成功任务二：阅读JFinal的源码并对每一部分的功能进行介绍任务三：基于JFinal完成一个简单的学生信息管理系统项目结构：功能演示：界面：添加学生：删除学生：删除王五为例修改阅读全文

posted @ 2021-12-07 20:20 学习中_1 阅读(202) 评论(0) 推荐(0)

Guns快速开发

摘要：任务一：导入并配置Guns框架下载Demo 导入项目配置数据库启动项目启动成功任务二：阅读Gans的源码并对每一部分的功能进行介绍包类/接口功能 cn.stylefeng.guns GunsApplication SpringBoot方式启动类 GunsServletInitiali 阅读全文

posted @ 2021-12-07 20:17 学习中_1 阅读(283) 评论(0) 推荐(0)

2021年12月6日

HDFS与MAPREDUCE操作

摘要：二、实验内容 1.虚拟机集群搭建部署hadoop 安装VM 在VM中安装Linux 在linux中安装hadoop 2.HDFS文件操作启动hadoop 上传文件 3.MAPREDUCE并行程序开发 3.1 求每年最高气温 import java.io.IOException; import or 阅读全文

posted @ 2021-12-06 23:53 学习中_1 阅读(62) 评论(0) 推荐(0)

Mapreduce实例——ChainMapReduce

摘要：实验目的 1.准确理解ChainMapReduce的设计原理 2.熟练掌握ChainMapReduce的程序代码编写 3.了解ChainMapReduce的使用场景实验原理一些复杂的任务难以用一次MapReduce处理完成，需要多次MapReduce才能完成任务。Hadoop2.0开始MapRe 阅读全文

posted @ 2021-12-06 23:40 学习中_1 阅读(81) 评论(0) 推荐(0)

Mapreduce实例——倒排索引

摘要：实验目的 1.了解倒排索引的使用场景 2.准确理解倒排索引的设计原理 3.熟练掌握MapReduce倒排索引程序代码编写实验原理 "倒排索引"是文档检索系统中最常用的数据结构，被广泛地应用于全文搜索引擎。它主要是用来存储某个单词（或词组）在一个文档或一组文档中的存储位置的映射，即提供了一种根据内容阅读全文

posted @ 2021-12-06 23:38 学习中_1 阅读(347) 评论(0) 推荐(0)

Mapreduce实例——二次排序

摘要：实验目的 1.准确理解MapReduce二次排序的设计原理 2.了解二次排序的适用场景 3.熟练掌握MapReduce二次排序程序代码编写实验原理在Map阶段，使用job.setInputFormatClass定义的InputFormat将输入的数据集分割成小数据块splites，同时Input 阅读全文

posted @ 2021-12-06 23:36 学习中_1 阅读(95) 评论(0) 推荐(0)

Mapreduce实例——单表join

摘要：实验目的 1.准确理解MapReduce单表连接的设计原理 2.熟练掌握MapReduce单表连接程序的编写 3.了解单表连接的运用场景 4.学会编写MapReduce单表连接程序代码解决问题实验原理以本实验的buyer1(buyer_id,friends_id)表为例来阐述单表连接的实验原理。阅读全文

posted @ 2021-12-06 23:31 学习中_1 阅读(44) 评论(0) 推荐(0)

Mapreduce实例——排序

摘要：验目的 1.准确理解Mapreduce排序的实验原理 2.熟练掌握Mapreduce排序的程序代码编写 3.培养编写MapReduce排序代码解决问题的能力实验原理 Map、Reduce任务中Shuffle和排序的过程图如下：流程分析： 1.Map端：（1）每个输入分片会让一个map任务来处理阅读全文

posted @ 2021-12-06 23:30 学习中_1 阅读(210) 评论(0) 推荐(0)

Mapreduce实例——求平均值

摘要：实验目的 1.准确理解Mapreduce求平均值的设计原理 2.熟练掌握Mapreduce求平均值程序的编写 3.学会编写Mapreduce求平均值程序代码解决问题实验原理求平均数是MapReduce比较常见的算法，求平均数的算法也比较简单，一种思路是Map端读取数据，在数据输入到Reduce之阅读全文

posted @ 2021-12-06 23:28 学习中_1 阅读(160) 评论(0) 推荐(0)

Mapreduce实例——去重

摘要：实验目的 1.准确理解MapReduce去重的设计原理 2.熟练掌握MapReduce去重的程序编写 3.学会自己编写MapReduce去重代码解决实际问题实验原理 “数据去重”主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞阅读全文

posted @ 2021-12-06 23:24 学习中_1 阅读(150) 评论(0) 推荐(0)

公告