2020年2月23日
scrapy+pyppeteer指定搜索动态爬取头条
摘要： 一、介绍 由于头条现在采取了动态js渲染的反爬措施，还有其他各种js加密反爬，使用简单的requests非常困难 Puppeteer 是 Google 基于 Node.js 开发的一个工具，有了它我们可以通过 JavaScript 来控制 Chrome 浏览器的一些操作，当然也可以用作网络爬虫上，其 阅读全文
posted @ 2020-02-23 22:21 Maple_feng 阅读(2941) 评论(2) 推荐(1)