随笔分类 -  爬虫

python3 用requests.get获取网页内容为空 ＜Response [200]＞
摘要：import requestsfrom bs4 import BeautifulSoup headers = { 'Cookie':'OCSSID=4df0bjva6j7ejussu8al3eqo03', 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win 阅读全文
posted @ 2021-05-30 00:22 大白菜！ 阅读(848) 评论(0) 推荐(0)
pip3 install pycryptohome
摘要：python3.6此库安装方式，需要pip3 install pycryptodome。 如有site-packages中存在crypto、pycrypto， 在pip之前，需要pip3 uninstall crypto、pip3 uninstall pycrypto，否则无法安装成功。 C:\WI 阅读全文
posted @ 2021-05-29 23:17 大白菜！ 阅读(373) 评论(0) 推荐(0)
selenium 安装与 chromedriver安装
摘要：安装selenium selenium可以直接可以用pip安装。 pip install selenium 安装chromedriver 下载 chromedriver的版本一定要与Chrome的版本一致，不然就不起作用。 有两个下载地址： 1、http://chromedriver.storage 阅读全文
posted @ 2021-05-29 19:11 大白菜！ 阅读(66) 评论(0) 推荐(0)
解决：'chromedriver' executable needs to be in PATH问题
摘要：解决：‘chromedriver’ executable needs to be in PATH问题 1.首先需要下载Chromedriver，下载后得到的是一个chromedriver.exe文件。chromedriver下载地址:http://npm.taobao.org/mirrors/chr 阅读全文
posted @ 2021-05-29 19:10 大白菜！ 阅读(449) 评论(0) 推荐(0)