第一种方法是通过WebClient 来获取

  其中有两种方法:

  1利用WebClien的DownloadData方法,直接获取。

   string PageUrl = "http://www.webjx.com";
   WebClient wc = new WebClient();
   wc.Credentials = CredentialCache.DefaultCredentials;

   ///方法一:
     Byte[] pageData = wc.DownloadData(PageUrl);
     Response.Write(Encoding.UTF8.GetString(pageData));

  2  利用WebClient的OpenRead 方法得到一个数据流,然后通过流数据来读取(我觉得这种方法适合大数据的源成url) 呵呵 ,不知道说得对不对? 

/// 方法二

    Stream resStream = wc.OpenRead(PageUrl);
    StreamReader sr = new StreamReader(resStream,System.Text.Encoding.Default);
    ContentHtml.Text = sr.ReadToEnd();
    resStream.Close();

当然这种用流的方式还是只是用于数据不大的情况,如果数据很大的话,由于我们开了个流,就可以采取措施。分步的来获取,不至于影响到程序的性能

  第二种方法是用WebRequest 和 WebResponse来配合得到,具体流程是:

  通过WebRequest 的 GetResponse方法将页面的源码传入WebResponse之中,然后在返  回一个Stream 通过读取这个stream来得到源代码:

string Url = "Http://www.webjx.com";
   string StrReturn = "";
   WebResponse result = null;  
   try
   {
    WebRequest req = WebRequest.Create(Url);  
    result = req.GetResponse();
    Stream ReceiveStream = result.GetResponseStream();   
    Encoding encode = System.Text.Encoding.GetEncoding("GB2312");
    StreamReader sr = new StreamReader( ReceiveStream,encode);
    Char[] read = new Char[256];
    int count = sr.Read(read, 0, 256);
    while (count > 0)
    {
     String str = new String(read, 0, count);
     StrReturn += str;
     count = sr.Read(read, 0, 256);
    }
   }
   catch(Exception ee)
   {
    StrReturn += e.ToString();
    StrReturn += "找不到请求 URI,或者它的格式不正确";
   }
   finally
   {
    if ( result != null )
    {
     result.Close();
    }
   }
   Response.Write( @StrReturn.Trim());

  其中这里有一个小的技巧 读取数据流时,这段代码时让它以256字节为单位来循环读取,这样当数据较大时,就不会过大的影响到程序的性能

  呵呵 不知道我说的对不对,欢迎大家和我讨论

posted on 2007-02-07 14:34  mbskys  阅读(117)  评论(0)    收藏  举报