错与对并不是绝对的

寒假学习报告13

摘要：实验 4 RDD 编程初级实践一、实验目的（1）熟悉 Spark 的 RDD 基本操作及键值对操作；（2）熟悉使用 RDD 编程解决实际具体问题的方法。二、实验平台操作系统：Ubuntu16.04 Spark 版本：2.1.0 三、实验内容和要求 1．spark-shell 交互式编程下阅读全文

posted @ 2020-02-13 22:06 错与对并不是绝对的阅读(589) 评论(0) 推荐(0)

寒假学习报告12

摘要：把昨天剩余的Scala基础编程做了，也按要求做了下一个实验的内容 3. 统计学生成绩学生的成绩清单格式如下所示，第一行为表头，各字段意思分别为学号、性别、课程名 1、课程名 2 等，后面每一行代表一个学生的信息，各字段之间用空白符隔开给定任何一个如上格式的清单（不同清单里课程数量可能不一样），要阅读全文

posted @ 2020-02-12 21:23 错与对并不是绝对的阅读(296) 评论(0) 推荐(0)

寒假学习报告11

摘要：看了看汤家凤老师的考研数学，讲的挺好的还做了Scala的初级编程实验一、实验目的 1.掌握 Scala 语言的基本语法、数据结构和控制结构； 2.掌握面向对象编程的基础知识，能够编写自定义类和特质； 3.掌握函数式编程的基础知识，能够熟练定义匿名函数。熟悉 Scala 的容器类库的基本层次结构阅读全文

posted @ 2020-02-11 21:31 错与对并不是绝对的阅读(281) 评论(0) 推荐(0)

寒假学习报告10

摘要：今天继续研究了爬虫遇到了一些问题，各种查阅资料才得以解决。 response.xpath.extract()爬取的值里面含有\r\n\t，如何去掉呢？需要normalize-space()比如:response.xpath('//div[@class=""]/text()').extract()使阅读全文

posted @ 2020-02-10 21:52 错与对并不是绝对的阅读(143) 评论(0) 推荐(0)

寒假学习报告09

摘要：今天终于把上一个程序优化了，会在scrapy中使用json了，在scrapy中使用post方法也把我卡住了，也是费了好大好大的劲阅读全文

posted @ 2020-02-09 22:27 错与对并不是绝对的阅读(107) 评论(0) 推荐(0)

寒假学习报告08

摘要：想把上一个程序优化优化，结果JSON 格式的内容太难弄了，弄了一天也没优化成功，也是用phantomjs弄来着，也是失败了... 阅读全文

posted @ 2020-02-08 23:01 错与对并不是绝对的阅读(83) 评论(0) 推荐(0)

寒假学习报告06

摘要：学了使用scarpy框架进行爬虫，爬取了某网站的部分信息。部分代码： # -*- coding: utf-8 -*- import scrapy from dangdang01.items import Dangdang01Item from scrapy.http import Request 阅读全文

posted @ 2020-02-06 22:12 错与对并不是绝对的阅读(113) 评论(0) 推荐(0)

寒假学习报告05

摘要：今天在虚拟机上安装sbt和maven，按着林子雨老师的教程来的，也不知道是什么原因老出问题，到现在也没解决好。还学一些简单的爬虫知识。阅读全文

posted @ 2020-02-05 22:28 错与对并不是绝对的阅读(119) 评论(0) 推荐(0)

寒假学习报告04

摘要：今天学习了Scala的剩余的基础内容和安装了spark、sbt。 Scala 函数声明格式： def functionName ([参数列表]) : [return type] Scala 函数定义格式： def functionName ([参数列表]) : [return type] = { f 阅读全文

posted @ 2020-02-04 22:12 错与对并不是绝对的阅读(148) 评论(0) 推荐(0)

寒假学习报告03

摘要：首先，关于我那个出问题的虚拟机，我放弃了原来那个Ubuntukylin16.04的系统了，今天换了个新的Ubuntukylin18.04的系统，好吧，闪屏的问题终于没有了，我太高兴了，然后有一些其他的问题，如：因为没有vim，就用的vi命令进入的编辑模式，然后使用方面键，光标并不移动而是出现AB 阅读全文

posted @ 2020-02-03 22:07 错与对并不是绝对的阅读(174) 评论(0) 推荐(0)