摘要:
Ctrl+M 创建一个新的连接Ctrl+N 使用当前设置新建连接Ctrl+F4 断开当前连接 对象浏览器 F5 刷新对象浏览器(默认)Ctrl+B 设置焦点于对象浏览器 SQL 窗口 Ctrl+T 新建查询编辑器Ctrl+E 设置焦点于 SQL 窗口Ctrl+Y 重做 Ctrl+Z 撤销 Ctrl+
阅读全文
posted @ 2017-03-21 00:11
雷子-LL
阅读(889)
推荐(0)
摘要:
环境:python3.6 主要用到模块:requests,PyQuery 代码比较简单,不做过多解释了
阅读全文
posted @ 2017-03-17 22:52
雷子-LL
阅读(3497)
推荐(0)
摘要:
CookieMiddleware class scrapy.downloadermiddlewares.cookies.CookieMiddlewar 该中间件使得爬取需要cookie(例如使用session)的网站成为了可能。 其追踪了web server发送的cookie,并在之后的reques
阅读全文
posted @ 2017-03-15 02:46
雷子-LL
阅读(2471)
推荐(0)
摘要:
Scrapy使用request对象来爬取web站点。 request对象由spiders对象产生,经由Scheduler传送到Downloader,Downloader执行request并返回response给spiders。 Scrapy架构: 1、Request objects class sc
阅读全文
posted @ 2017-03-15 01:11
雷子-LL
阅读(26306)
推荐(1)
摘要:
Pyquery的用法与jQuery相同,可以直接参考jQuery API学习。
阅读全文
posted @ 2017-03-09 12:43
雷子-LL
阅读(975)
推荐(0)
摘要:
环境:win10(64位), Python3.6(64位) 1、安装pyhthon 这个就不多说了,对应版本就下载对应的依赖包 2、安装pywin32 在windows下,必须安装pywin32,安装地址:http://sourceforge.net/projects/pywin32/ 下载对应版本
阅读全文
posted @ 2017-03-09 02:32
雷子-LL
阅读(8587)
推荐(0)
摘要:
win10下安装pyspider 1、pip 我在安装pip的时候默认安装了Pip. 如果没有的话:pip安装 2、PhantomJS PhantomJS 是一个基于 WebKit 的服务器端 JavaScript API。它全面支持web而不需浏览器支持,其快速、原生支持各种Web标准:DOM 处
阅读全文
posted @ 2017-03-09 02:05
雷子-LL
阅读(2300)
推荐(0)
摘要:
官方文档 以下内容大多来自于官方文档,本文进行了一些修改和总结。要了解更多可以参考 官方文档 安装 利用 pip 安装 $ pip install requests $ pip install requests $ pip install requests $ pip install request
阅读全文
posted @ 2017-02-24 01:00
雷子-LL
阅读(484)
推荐(0)
摘要:
主要使用的模块是socket模块,在这个模块中可以找到socket()函数,该函数用于创建套接字对象。套接字也有自己的方法集,这些方法可以实现基于套接字的网络通信。 1、socket类型 构造函数: socket.socket(family=AF_INET, type=SOCK_STREAM, pr
阅读全文
posted @ 2017-02-23 22:27
雷子-LL
阅读(715)
推荐(0)