01 2021 档案
摘要:写在前面 今天主要学习了机器学习部分的降维,完成了SparkSQL的学习 机器学习部分 今天主要学习了降维的概念,在机器学习中,我们有时候会遇到纬度很高的情况,对我们的计算和使用带来了很多问题,这时候我们就可以通过一些算法对他进行降维处理,从而达到不怎么损失精度又能解决问题的情况。主要介绍了PCA等
阅读全文
摘要:写在前面 今天主要学习了SparkSQL的基础概念,然后学习了一下机器学习中的聚类。 机器学习部分 聚类,就是将一组数据中集中相似的样本进行分类。属于机器学习中的无监督学习方法(没有目标值y)。今天主要学习了一下K-Means算法。K-Means算法是聚类中一个十分常见的算法。 最后,通过Pytho
阅读全文
摘要:写在前面 今天主要学习了机器学习十讲的第四讲,然后把SparkCore中的几种常用算子都学习完毕,用WordCount做了一个小总结。 机器学习部分 今天的学习中,首先系统的分析了模型误差出现的原因: 用我自己理解的话说,模型空间限制了模型的表达能力,使得模型与真实数据之间存在一个客观的误差,叫做逼
阅读全文
摘要:写在前面 昨天太累了,一觉睡醒干到十二点了。记录一下今天学习的内容。 分类 首先讲解了一下梯度下降法,这是数学里用来求解无约束最优化问题的经典方法,之后回顾了一下最大似然估计。 之后便开始讲解了三种经典的分类算法——感知机,支持向量机和逻辑回归。 在大概讲解了三种算法后,使用py里面的numpy,m
阅读全文
摘要:写在前面 昨天起的比较迟,匆匆看了看十天机器学习的网课就去帮学弟学妹的忙了,所以没有学习Spark的相关内容。 机器学习中的回归 主要学习了线性回归中的数学模型,并针对模型中的一些问题提出了常规的解决方法——正则化。正则化中根据参数的不同可以分为岭回归和LASSO,分别讲解了两种方式的具体解释。最后
阅读全文
摘要:写在前面 今天主要学习了数据酷客的机器学习十讲的第一讲和Spark里的转移算子 Spark转移算子案例实操 首先是这样的一个需求: 1516609143867 6 7 64 16 1516609143869 9 4 75 18 1516609143869 1 7 87 12 151660914386
阅读全文
摘要:写在前面 今天主要学习了Spark环境的搭建以及一些RDD算子的学习 Spark环境搭建 比起hadoop的环境搭建,要搭建起一个Spark的学习环境不要太简单。我们使用Idea创建一个Maven项目,导入scala的支持,然后导入如下依赖: <dependencies> <dependency>
阅读全文
摘要:写在前面 今天完成了scala语言的学习,编写了一个简单的客户信息管理系统:scala语言实现客户信息管理系统 总结 明天开始学习spark,争取一月底前把spark学习完毕,然后抓紧时间学习人工智能的相关知识
阅读全文
摘要:写在前面 到今天为止scala语言学的差不多了,按照惯例,写一个差不多的增删改查系统来练练手。 需求分析 模拟实现基于文本界面的《客户信息管理软件》。 该软件能够实现对客户对象的插入、修改和删除,并能够打印客户明细表。 项目采用分级菜单方式。 可以看到,是一个十分常规的增删改查系统。我们首先看看题目
阅读全文
摘要:写在前面 今天主要学习了scala中的集合操作以及函数式编程的一些内容 总结 明天继续学习scala
阅读全文
摘要:写在前面 今天主要学习了scala中的集合的基础知识,今天去做了统一检查的核酸检测,晚上又看了一个考研的直播,所以没学多少,进度有点拖慢了。 总结 明天继续学习scala,争取一月底把spark和scala都学习完
阅读全文
摘要:写在前面 今天主要学习了scala中的trait、隐式转换,函数,类。 总结 明天继续学习scala
阅读全文
摘要:写在前面 今天主要学习了scala中的面向对象相关的内容 总结 明天继续学习scala
阅读全文
摘要:写在前面 今天主要学习了scala中的函数式编程的基础和面向对象方面的内容 总结 明天继续学习scala
阅读全文
摘要:写在前面 今天主要学习了scala语言的基础语法,变量定义等 总结 明天继续学习scala
阅读全文
摘要:写在前面 Kafka是一个消息队列框架,在大数据生态体系中有着极其重要的作用。同时其在java后端领域也有着很高的地位。今天就来学习一下kafka 快速入门 前置配置 kafka需要zookeeper的支持,因此要先配置好zookeeper,详见这篇博客: ZooKeeper搭建和使用笔记,这里就默
阅读全文
摘要:写在前面 今天主要学习了kafka的相关内容,如下链接:Kafka学习笔记-博客园、Kafka学习笔记-我的博客 总结 明天开始学习spark的基础scala
阅读全文
摘要:写在前面 在假期中,系主任安排了任务让我们去阅读一下关于软件架构的书。在经过网上的一顿搜索中,我选择了这本《软件架构师应该知道的97件事》,这本书比起其他的软件架构书籍来说,更多的只是陈述了一些我们如何去做的事情,而不会过分的强调具体的实现。因为我毕竟在这方面是个小菜鸟,看书也应当是从最基础开始。
阅读全文
摘要:写在前面 经过一天的捣鼓,终于成功的搭建了自己的博客到公网上。 2022.9.12:服务器已过期,删掉了博客地址。 技术分析 这个博客系统,是一个前后端分离的系统。通过nginx做了负载均衡,有着大概如下的结构图: 整个博客系统,后台使用了Springboot来构建整个项目,使用了solr作为搜索引
阅读全文
摘要:写在前面 今天主要渲染了一下评论列表,然后做了一下关于页面,处理了一些细节问题 效果展示 总结 最近身体越来越不好了,本来按说今天就能完成,但没办法只能拖到明天了,明天估计会写完然后部署到服务器上。之后赶紧休息调养一下身体
阅读全文
摘要:写在前面 今天主要写了文章详情页面,但还差评论没渲染出来。 效果展示 总结 今天主要学习了一下动态生成目录的技巧,估计明天就能写完了。写完后部署到服务器上,再休息一天就准备开始Spark了
阅读全文
摘要:写在前面 今天主要完成了注册、找回密码和扫码登录功能 项目截图 总结 目前还剩下文章详情以及一些细节没有做,明天估计会写完文章详情。
阅读全文
摘要:写在前面 今天主要写完了搜索功能,实现了登陆功能,做了一些优化体验。 当前系统截图 友链界面: 搜索界面: 首页: 总结 目前已经实现了一半的功能,预计再有三四天就能写完了。写完后就开始学习scale和spark,然后开始人工智能。
阅读全文
摘要:写在前面 今天主要完成了博客系统门户的主页和友链界面,了解到了vue中的过滤器的知识 vue中的自定义过滤器 官方解释 直接查阅官方文档,可以看到这样的解释: Vue.js 允许你自定义过滤器,可被用于一些常见的文本格式化。过滤器可以用在两个地方:双花括号插值和 v-bind 表达式 (后者从 2.
阅读全文
摘要:写在前面 按照王老师的要求,来记录一下每天的学习进度 博客系统管理中心 简介 这几天在家花了点时间写了一个自己的博客系统的管理中心,在上学期就已经写好了整个后台。整个系统是一个前后端分离的架构,主要用了Vue、SpringBoot等技术。 演示图 总结 下一步准备去写门户,准备在写完这个博客系统后再
阅读全文

浙公网安备 33010602011771号