蜘蛛抓取页面的转码问题

由于不同网站的网页格式不一样，通用的都是utf-8，但是也有gb2312的情况，不同格式的网页，存入数据库再读取的时候会转成乱码，
这就是我们当下要解决的问题
 1 public class Network
{
    /// 获得页面的html代码
    /// </summary>
    /// <param name="url">页面地址</param>
    public static string GetHtml(string url)
    {
        string html = "";
        try
        {
            WebClient MyWebClient = new WebClient();

            Encoding utf8 = Encoding.UTF8;

            Encoding defaultCode = Encoding.Default;

            MyWebClient.Credentials = CredentialCache.DefaultCredentials;//获取或设置用于对向Internet资源的请求进行身份验证的网络凭据。

            Byte[] pageData = MyWebClient.DownloadData(url);//从指定网站下载数据
            string pageHtml = Encoding.Default.GetString(pageData);
            string Encodeing = getEncoding(pageHtml);
            if (Encodeing != "GB2312" && Encodeing != "GBK")
            {
                byte[] defaultBytes = Encoding.Convert(utf8, defaultCode, pageData);
                pageHtml = Encoding.Default.GetString(defaultBytes);  //如果获取网站页面采用的是GB2312，则使用这句 
            }

            html = pageHtml;
        }
        catch (WebException webEx)
        {
            Console.WriteLine(webEx.Message.ToString());
        }
        return html;
    }
    public static string getEncoding(string html)
    {
        Match match = Regex.Match(html, "charset=(?'ecncoding'.*[\\d|k|K])\"");
        GroupCollection groups = match.Groups;
        string ecncoding = groups["ecncoding"].Value;
        return ecncoding.ToUpper();
    }
}