摘要: 最近做数据采集,碰到了很多钉子,这里一一记录下来。很久没写东西了... ,不是没有写的,是没心情写,想的太多了,在想些什么,自己也说不清楚,往大了说关于人生,往小了说关于怎么活。扯远了,不废话了。1、选择什么方式去采集?网上方式很多WebClient,WebRequest和WebBroswer,分析需求之后选择WebBroswer ,原因有几点:a、很多地方需要登陆之后才能采集,要做模拟登陆就会牵扯到状态保存问题等等b、多级页面跳转,也需要模拟去触发点击事件c、Ajax页面数据采集2、WebBroswer 的加载状态问题,页面什么时候加载完?WebBroswer 加载状态一个页面时候加载完 , 阅读全文
posted @ 2010-08-07 20:37 Daniel Chow 阅读(3920) 评论(4) 推荐(6) 编辑