2025.12.7总结
今天尝试用ai生成爬取京东评论的程序,但是怎么整也不行,这反扒机制太强了,然后参考舍友的一篇博客的代码。里面有一项新的技术DrissionPage,这种是完全模拟用户行为来获取想要的数据
优点是能完美解决反爬问题,因为就是平常用户看评论,在浏览器上打开京东,打开评论区,看评论,和传统爬虫直接发送请求不一样,
缺点就是慢
今天尝试用ai生成爬取京东评论的程序,但是怎么整也不行,这反扒机制太强了,然后参考舍友的一篇博客的代码。里面有一项新的技术DrissionPage,这种是完全模拟用户行为来获取想要的数据
优点是能完美解决反爬问题,因为就是平常用户看评论,在浏览器上打开京东,打开评论区,看评论,和传统爬虫直接发送请求不一样,
缺点就是慢