2013年4月4日

C#网页爬虫学习笔记(1)

摘要: 最近做的东西感觉是各种搜索,这次学习的爬虫技术。爬虫技术,又叫做网络蜘蛛(蚂蚁等),是借助计算机实现人类无法达到的速度不间断的对执行某些任务,在这里我们的目标是获取指定网站中的指定数据。既然要获取数据,我们首先要做的就是与网站取得通信建立连接,C#的System.Web为我们提供了建立通信的方法 HttpWebRequest all_request = (HttpWebRequest)WebRequest.Create(galURL); WebResponse all_response = all_request.GetResponse();HttpWebRequest是像指定网站发送请求,在 阅读全文

posted @ 2013-04-04 15:20 woud 阅读(654) 评论(0) 推荐(0) 编辑

导航