随笔分类 -  python爬虫

python 爬取懂车帝详情页“全部车型模块信息”
摘要：需要爬取的内容：汽车具体型号，指导价，经销商报价，车主参考价 import requests import pymysql # 车型库 def Dongchedi(offset): url = 'https://www.dongchedi.com/motor/brand/m/v6/select/se 阅读全文
posted @ 2021-04-16 14:57 小白龙冲冲冲 阅读(760) 评论(0) 推荐(0)
python_scrapy_爬虫
摘要：scrapy框架 详情页的爬取, 爬取主页字段的同时,爬取字段链接的详情内容. 阅读全文
posted @ 2019-07-13 16:00 小白龙冲冲冲 阅读(256) 评论(0) 推荐(0)
scrapy框架_爬虫_踩过的小坑
摘要：---scrapy 框架 错误. 中文注释的错! 这锅我不想背!!!---- UnicodeDecodeError: 'gbk' codec can't decode byte 0xae in position 289: illegal multibyte sequence 阅读全文
posted @ 2019-07-10 20:33 小白龙冲冲冲 阅读(227) 评论(0) 推荐(0)
python爬虫入门_踩过的坑 No1
摘要：刚开始爬取的url是直接复制的 浏览器url输入框里面的url, 后来发现这个url爬取的html页面没有我想要爬取的信息. 阅读全文
posted @ 2019-07-04 19:28 小白龙冲冲冲 阅读(353) 评论(0) 推荐(0)