摘要: 实验8 Flink初级编程实践 1.实验目的 (1)通过实验掌握基本的Flink编程方法。 (2)掌握用IntelliJ IDEA工具编写Flink程序的方法。 2.实验平台 (1)Ubuntu18.04(或Ubuntu16.04)。 (2)IntelliJ IDEA。 (3)Flink1.9.1。 阅读全文
posted @ 2023-12-13 09:54 lmyyyy 阅读(109) 评论(0) 推荐(0)
摘要: 实验7 Spark初级编程实践 1.实验目的 (1)掌握使用Spark访问本地文件和HDFS文件的方法 (2)掌握Spark应用程序的编写、编译和运行方法 2.实验平台 (1)操作系统:Ubuntu18.04(或Ubuntu16.04); (2)Spark版本:2.4.0; (3)Hadoop版本: 阅读全文
posted @ 2023-12-13 09:54 lmyyyy 阅读(67) 评论(0) 推荐(0)
摘要: 实验6 熟悉Hive的基本操作 1.实验目的 (1)理解Hive作为数据仓库在Hadoop体系结构中的角色。 (2)熟练使用常用的HiveQL。 2.实验平台 操作系统:Ubuntu18.04(或Ubuntu16.04)。 Hadoop版本:3.1.3。 Hive版本:3.1.2。 JDK版本:1. 阅读全文
posted @ 2023-12-13 09:54 lmyyyy 阅读(111) 评论(0) 推荐(0)
摘要: 实验5 MapReduce初级编程实践 1.实验目的 (1)通过实验掌握基本的MapReduce编程方法; (2)掌握用MapReduce解决一些常见的数据处理问题,包括数据去重、数据排序和数据挖掘等。 2.实验平台 (1)操作系统:Linux(建议Ubuntu16.04或Ubuntu18.04) 阅读全文
posted @ 2023-12-13 09:53 lmyyyy 阅读(65) 评论(0) 推荐(0)