python爬虫学习笔记

(BeautifulSoup的官方文档非常详细）

requests库

 

框架（改变user-agent）

BeautifulSoup库

基本使用

 

文件读写

1 f = open('/path/to/file', 'r')

爬取图片

 

遍历子节点

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

（中文编码写入文件后乱码，加入utf-8）

 

posted @ 2020-02-22 13:38  __ZRH  阅读(129)  评论(0)    收藏  举报