02 2020 档案

《架构漫谈》读后感——软件架构师的工作
摘要：软件架构是软件开发中一个非常非常重要的过程。我们都知道在一个软件开发项目中，软件架构师是一个团队的核心，他负责整个软件开发的分工和沟通的安排，组织整个 团队进行分工合作，高效率的完成软件开发任务。 在之前的代码编写中，大多数是自己独立开发，编写代码和测试代码。从来没有加入过实际项目开发过程，也少有团 阅读全文
posted @ 2020-02-18 10:52 Aduoee 阅读(114) 评论(0) 推荐(0)
寒假学习进度15
摘要：接上次的python爬虫进阶，这次学习了针对一些网站的反爬虫处理方式以及用键值对向url传递参数，模拟人工输入的网页搜索。 我们知道，不管是正常的爬虫还是恶意爬虫，不仅会导致网站信息泄露，而且还会导致服务器压力过大。想象一下，一台计算机模拟人工请求访问服务器，并且与以计算机的速度与服务器进行交互，势 阅读全文
posted @ 2020-02-16 17:44 Aduoee 阅读(111) 评论(0) 推荐(0)
寒假学习进度14
摘要：今天主要学习了python爬虫的一些进阶内容，因为我对这部分内容比较感兴趣，就去b站上找了北理工的mooc视频。老师讲课深入浅出，循循渐进，十分适合新手学习爬虫，其中还包含了基本规范和道德，称作“盗亦有道”。 之前看过一些爬虫视频，一些老师上手就是开始干货，上代码爬数据。随便找一个网站就开始爬取自己 阅读全文
posted @ 2020-02-16 17:31 Aduoee 阅读(95) 评论(0) 推荐(0)
寒假学习进度13
摘要：今天主要看了林子雨老师的spark基础和scala基础。 基本学会了scala基本语法和spark的简单使用，与scala的结合。 明天根据spark实验进一步深化学习。 阅读全文
posted @ 2020-02-14 21:24 Aduoee 阅读(93) 评论(0) 推荐(0)
寒假学习进度12
摘要：因为重新装了系统，导致之前虚拟机及ubuntu系统环境都没有了。因为马上要开学了，学习大数据环境一定是必备的，今天无论如何都要安装好环境。 最开始学习hadoop的时候，我就自己装过虚拟机还有阿里云esc服务器环境，但是只有云服务器安装成功了。但在具体使用过程中，发现纯命令行的界面以及云服务器的 网 阅读全文
posted @ 2020-02-14 21:23 Aduoee 阅读(104) 评论(0) 推荐(0)
寒假学习进度11
摘要：昨天安装了virtualbox装虚拟机会出现系统闪烁，没法使用的问题，在博客园和csdn论坛寻找解决方法无果后，我选择下载了vmwarepro版本。 因为vmware是收费的，所以还需要破解。这里给大家推荐一个微信公众号叫电脑软件安装管家，里面有各种常用的电脑软件和破解方法，最后我下载了 一个注册机 阅读全文
posted @ 2020-02-11 20:40 Aduoee 阅读(75) 评论(0) 推荐(0)
寒假学习进度10
摘要：接昨天的虚拟环境安装，因为之前自己一步一步安装的系统环境存在很多问题，这次我选择直接安装林子雨老师提供的镜像文件。 据说里面全部安装好了环境，我先试一试，如果不行的话再自行安装。 在Windows系统中，安装虚拟机软件（比如VirtualBox或VMVare），然后，打开虚拟机软件VirtualBo 阅读全文
posted @ 2020-02-10 21:21 Aduoee 阅读(126) 评论(0) 推荐(0)
寒假学习进度9
摘要：由于重装了系统，之前的虚拟机及环境都没有了，所以得重新进行安装。 我选择用virtualbox作为虚拟机启动器，首先要在官网上下载windows主机版本的，下载完成并且安装好后，就可以打开运行了。 安装完成后就要设置虚拟机了，点击新建,在名称后输入自己起的名字,选择自己的系统类型和版本,我是打算装w 阅读全文
posted @ 2020-02-10 20:53 Aduoee 阅读(93) 评论(0) 推荐(0)
寒假学习进度8
摘要：今天吃过早饭，睡眼惺忪中看到了班群里小民哥艾特了全体成员。我心中一惊，已觉不妙，战战兢兢打开聊天框，发现小民哥果然 准时出现，给我们布置了新的任务。 小民哥要求大家网络搜集关于新型冠状确诊病例、疑似病例每天的人数、所在城市，并生成疫情扩散模型，作为下学期《大数据技 术》课程考核大作业。数据要求来源于 阅读全文
posted @ 2020-02-08 20:07 Aduoee 阅读(80) 评论(0) 推荐(0)
寒假学习进度7
摘要：今天主要进行scala学习，再b站上找好了一个比较不错的视频。 视频链接：https://www.bilibili.com/video/av39126512?from=search&seid=11655088589598890079 scala可以访问现存的数之不尽的java类库，迁移到scala更 阅读全文
posted @ 2020-02-07 17:34 Aduoee 阅读(83) 评论(0) 推荐(0)
寒假学习进度6
摘要：今天主要完成了python正则表达式的学习，资源视频从b站上获取，附上链接 https://www.bilibili.com/video/av4050443?from=search&seid=10900889064745664022 老师讲课通俗易懂，幽默风趣，十分适合初学者学习python语言及其 阅读全文
posted @ 2020-02-05 21:24 Aduoee 阅读(79) 评论(0) 推荐(0)
寒假学习进度5
摘要：今天根据林子雨的大数据教程，安装了虚拟机ubuntu环境以及hadoop环境的安装，装好了hive数据库。 利用b站视频学习了python爬虫知识，明天准备完成寒假任务数据的爬取，但是目前正则表达式还是有点问题，不能熟练的使用，还需要多加练习，才能掌握。 观看了新东方全程英语考研教程的导学和视频，打 阅读全文
posted @ 2020-02-04 21:21 Aduoee 阅读(85) 评论(0) 推荐(0)
寒假学习进度4
摘要：今天主要完成了焊缝识别软件界面的全部书写，完成了软件著作权申请说明书，准备交给学长做进一步的修改提交申请。如果成功的话就是第二个软件著作权了。 因为重新装了系统，所以得重新装虚拟机和hadoop，spark环境，决定明天开始。 部分代码如下： # -*- coding: utf-8 -*- # Fo 阅读全文
posted @ 2020-02-03 20:23 Aduoee 阅读(118) 评论(0) 推荐(0)
寒假学习进度3
摘要：今天主要完成了pyqt库及相应工具的安装，以及简单的实现了界面功能。 开发工具IDE选择pycharm,因为之前就进行过python爬虫学习，所以IDE早就以及安装配置好了。 还有一点需要提的就是pyqt提供一个可视化工具叫QTDesigner,就像我们之前做过的C#一样，直接拖动控件完成界面布局就 阅读全文
posted @ 2020-02-01 20:38 Aduoee 阅读(87) 评论(0) 推荐(0)