摘要：
1、Spark相关概念介绍 是一个分布式计算框架； 2、Spark的框架模块 3、Spark运行模式 Spark总结概述： 4、Local模式 阅读全文
posted @ 2023-10-07 10:33
yesyes1
阅读(14)
评论(0)
推荐(0)
摘要：
今日收获 回学校啦！！！ 今天背了好多的单词，准备了部分的软考； 还解决了一些有关于springboot和数据库的“恩怨情仇”； 不得不感叹一句，软考的题目真的好广泛啊😱 明天预计 希望！！！考试顺利！！！（x3） 然后，继续准备之后的考试啥的； 绝了，明天居然没有王老师的测试，没关系，就相当于提 阅读全文
posted @ 2023-10-06 22:11
yesyes1
阅读(12)
评论(0)
推荐(0)
摘要：
问题描述 使用hadoop在虚拟机里面运行打包的程序出错： 问题解决 我一开始用的是JDK17，然后换成了JDK8，再将程序打包，就解决啦！ 就是我本机的JDK版本比虚拟机里面的JDK版本高太多了，改成低版本的就ok啦! 阅读全文
posted @ 2023-10-06 16:33
yesyes1
阅读(110)
评论(0)
推荐(0)
摘要：
1、自己准备一个数据量比较小的txt文件 然后将其上传到虚拟机本地： 之后上传到hdfs里面： 2、编写代码 1、引入相关依赖 <dependencies> <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-common 阅读全文
posted @ 2023-10-06 16:15
yesyes1
阅读(21)
评论(0)
推荐(0)
摘要：
1、存储加密的密码，实现数据库加密的操作 BCryptPasswordEncoder bCryptPasswordEncoder=new BCryptPasswordEncoder(); String encode=bCryptPasswordEncoder.encode(password); Us 阅读全文
posted @ 2023-10-06 14:22
yesyes1
阅读(325)
评论(0)
推荐(0)
摘要：
问题描述 在我加上spring-boot-starter-security的依赖之后，启动项目报出来这样的错误： 问题解决 在启动类的注解上，加上这么一段代码就ok啦！ 启动成功： 阅读全文
posted @ 2023-10-06 12:40
yesyes1
阅读(924)
评论(0)
推荐(0)
摘要：
今日收获 背了单词！！ 学习了MapReduce的相关知识； 明天预计 好吧，由于特殊情况，回校时间推迟到了明天上午； 回校之后就再准备准备王老师的考试，尊的害怕~ 背单词！！！ 准备顺利！ 阅读全文
posted @ 2023-10-05 19:28
yesyes1
阅读(10)
评论(0)
推荐(0)
摘要：
1、概念 2、代码实现 自定义一个类： 在JobMain（与之前的基本一样）里面： 阅读全文
posted @ 2023-10-05 15:56
yesyes1
阅读(27)
评论(0)
推荐(0)
摘要：
1、概念和原理--结构化对象转换为字节流 2、编程流程（举例说明） 1、读取文件为键值对 <偏移量，文件内容> 2、Map阶段 3、排序 4、Reduce阶段 5、保存结果--使用TextOutputFormat类 3、代码编写 1、自定义类型和比较器--自定义命名为SortBean 并实现接口Wr 阅读全文
posted @ 2023-10-05 15:31
yesyes1
阅读(20)
评论(0)
推荐(0)
摘要：
今日收获 学习了有关MapReduce的知识点； 背了单词； 学习了软考的相关知识； 明天预计 预计明天下午回学校去； 然后继续我的学习生涯； 继续加油吧！ 阅读全文
posted @ 2023-10-04 21:45
yesyes1
阅读(10)
评论(0)
推荐(0)
浙公网安备 33010602011771号