2019 年 11月 4 日随笔档案 - 天若有情66

公告

2019年11月4日

随机设置爬虫头部headers 信息

摘要： 1 user_agent = [ 2 "Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_6_8; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50", 3 "Moz 阅读全文

posted @ 2019-11-04 16:13 天若有情66 阅读(974) 评论(0) 推荐(0)

爬虫代码框架

摘要：这是一个代码大框架，可以在此基础上添加内容。 1 import requests 2 3 def getHTMLText(url): 4 try: 5 r = requests.get(url,timeout=30) 6 r.raise_for_status() 7 r.encoding=r.app 阅读全文

posted @ 2019-11-04 15:45 天若有情66 阅读(142) 评论(0) 推荐(0)

繁星点点……

公告

2019年11月4日

随机设置爬虫头部headers 信息

爬虫代码框架