python3 采集需要登录的网页数据

是数据采集中经常出现需要登录情况,为了避免登录的麻烦,可以迂回一下,

先手动在浏览器里面用用户名和密码登录,然后F12,在对应返回事件里面拷贝对应的Cookie和User-Agent ,然后黏贴在header里面,即可避免需要登录的问题:

 

 

 

posted on 2020-05-15 16:42  shaomine  阅读(1252)  评论(0编辑  收藏  举报