06 2018 档案

摘要:1、流程框架 2、在命令行中输入scrapy,会有scrapy常见命令参数 在命令中输入scrapy startproject quote创建一个叫quote的项目 cd到创建好的项目目录中,然后执行scrapy genspider quotes quotes.toscrape.com,创建spid 阅读全文
posted @ 2018-06-28 12:02 飞奔的小水牛 阅读(240) 评论(0) 推荐(0)
摘要:#! /usr/bin/env python # coding: utf-8 import requests import os from hashlib import md5 from multiprocessing.pool import Pool headers = { 'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X... 阅读全文
posted @ 2018-06-06 23:41 飞奔的小水牛 阅读(356) 评论(0) 推荐(0)
摘要:Ajax,全称为Asynchronous JavaScript and XML,即异步的JavaScript和XML。它不是一门编程语言,而是利用JavaScript在保证页面不被刷新、页面链接不改变的情况下与服务器交换数据并更新部分网页的技术。 对于传统的网页,如果想更新其内容,那么必须要刷新整个 阅读全文
posted @ 2018-06-06 19:26 飞奔的小水牛 阅读(590) 评论(0) 推荐(0)
摘要:参考链接:https://www.jianshu.com/p/7041a7ba7fe0 阅读全文
posted @ 2018-06-04 16:50 飞奔的小水牛 阅读(251) 评论(0) 推荐(0)
摘要:角色: 学校、学员、课程、讲师 要求: 1、创建北京、上海2所学校(已完成) 2、创建linux、python、go3个课程,linux/python在北京开,go在上海开(已完成) 3、课程包含周期、价格(已完成) 4、班级关联课程、讲师(已完成) 5、创建学员时,选择学校,关联班级(已完成) 6 阅读全文
posted @ 2018-06-03 13:55 飞奔的小水牛 阅读(1780) 评论(2) 推荐(0)
摘要:#! /usr/bin/env python # coding: utf-8 #环境要求:python3 #抓取猫眼电影top100 ''' 抓取的目标网站为:http://maoyan.com/board/4 页面中显示的有效信息有影片名称、主演、上映时间、上映地区、评分、图片等信息 点击下一页发现url会变成http://maoyan.com/board/4?offset=30,主要增加了o... 阅读全文
posted @ 2018-06-01 17:00 飞奔的小水牛 阅读(276) 评论(0) 推荐(0)