会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Loading
Yaro's Blog
管理
2016年8月22日
面试官让我上机写一个爬虫,没有经验,写的也没什么价值,就是想记录一下
摘要: 1.用WebRequest相关API抓取数据的时候会返回403服务器拒绝的问题。 经网上寻找解决方案,是用指定UserAgent参数伪装浏览器,并成功解决问题。 2.大众点评网上要抓取的数据是动态生成。抓取的Html内容中不包含想要获取的内容。 后来找到一个网友提供的思路: 用WinForm里的we
阅读全文
posted @ 2016-08-22 21:00 yaro-feng
阅读(1407)
评论(0)
推荐(0)
公告