摘要：【转】 基于C#.NET的高端智能化网络爬虫 前两天朋友发给我了一篇文章，是携程网反爬虫组的技术经理写的，大概讲的是如何用他的超高智商通过（挑衅、怜悯、嘲讽、猥琐）的方式来完美碾压爬虫开发者。今天我就先带大家开发一个最简单低端的爬虫，突破携程网超高智商的反爬虫技术。 一、什么是爬虫？ 很多人说我们这 阅读全文

摘要：【转】 C# 从需要登录的网站上抓取数据 背景：昨天一个学金融的同学让我帮她从一个网站上抓取数据，然后导出到excel，粗略看了下有1000+条记录，人工统计的话确实不可能。虽说不会，但作为一个学计算机的，我还是厚着脸皮答应了。 。 刚开始想的是直接发送GET请求，然后再解析返回的html不就可以获 阅读全文

摘要：【转】C# HttpWebRequest提交数据方式 HttpWebRequest和HttpWebResponse类是用于发送和接收HTTP数据的最好选择。它们支持一系列有用的属性。这两个类位 于System.Net命名空间，默认情况下这个类对于控制台程序来说是可访问的。请注意，HttpWebReq 阅读全文

摘要：【转】使用C#发送Http 请求实现模拟登陆（以博客园为例） 模拟登陆的原理很简单，就是发送一个Http 请求服务器获得响应，然后客户端获取到cookie即可实现模拟登陆，比如一些抢票软件的原理无非也是这样模拟客户端的cookie 然后发送请求去抢票。 本文将演示如何用C# 来实现模拟登陆的，推荐一 阅读全文