python网络爬虫入门范例

python网络爬虫入门范例

框架

HTTP请求和返回内容

Windows用户建议安装anaconda,因为有些套件难以安装。
安装使用pip install *
request

使用剖析器

找出所有含有特定标签的HTML元素
这里写图片描述

找出含有特定CSS属性的元素

这里写图片描述

取得所有a标签内的链接
这里写图片描述


Chrome插件InfoLite可以检查元素的标签


获取内文页面
内文页面
抓取标题

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述

[:-1]表示到最后一个,最后一个不取

lstrip()方法用于截掉字符左边的空格或指定字符

rstrip()方法用于截掉字符右边的空格或指定字符

这里写图片描述

这里写图片描述

这里写图片描述

这里写图片描述

posted @ 2018-06-01 17:11  Mayny#  阅读(98)  评论(0编辑  收藏  举报