2017年12月10日
scrapy--meta参数传递问题
摘要： scrapy使用大坑 meta参数传递出现之重复问题 问题描述： 爬虫目标： 实现哔哩哔哩网站的视频信息爬取，只要的信息结构爬去顺序为**关键词的搜索结果，拿到第一页上某个视频的标题，url，和时间，然后进入下级页面爬去该视频的对应的评论，回复，弹幕，点赞数等等数据，联合组成一个关于该视频的完整信息 阅读全文
posted @ 2017-12-10 17:47 在路上-UP 阅读(2389) 评论(0) 推荐(0)