抓取百度页面乱码问题

[Aimarzhang]

做了一个测试程序，抓取百度的搜索结果页面。如下代码：
Encoding encoding = Encoding.GetEncoding("gb2312");

Uri uri = new Uri("http://www.baidu.com/s?wd=美女&cl=3");
System.Net.WebRequest myrequest = System.Net.WebRequest.Create(uri);
System.Net.WebResponse myresponse;

myresponse = myrequest.GetResponse();
System.IO.Stream st = myresponse.GetResponseStream();
System.IO.StreamReader sr = new System.IO.StreamReader(st, encoding);
string html = sr.ReadToEnd();
sr.Close();
st.Close();
得到html为乱码：抓取结果的<title>部分如下：
<title>百度搜索_缇庡コ </title>\r

明显是乱码。

我还做了如下测试：
System.IO.StreamReader sr = new System.IO.StreamReader(st, System.Text.Encoding.Default);
结果是一样的乱码。

兄弟们知道怎么解决这个问题不？

[LikeCode]

Encoding encoding = Encoding.Unicode;
这个编码试试。

[Aimarzhang]

老兄，码更乱了，呵呵

[fowolf]

/// <summary>
/// string 网上HTML代码抓取程序
/// </summary>
/// <param name="a_strUrl">string 抓取的网址 </param>
/// <returns>返回HTML代码</returns>
public string Get_Http_10(string a_strUrl)
{
try
{
WebRequest hwr = HttpWebRequest.Create(a_strUrl);
HttpWebResponse rep = (HttpWebResponse)hwr.GetResponse();
StreamReader sr = new StreamReader(rep.GetResponseStream(), Encoding.GetEncoding("gb2312"));
StringBuilder response = new StringBuilder();
string temp = string.Empty;
while ((temp = sr.ReadLine()) != null)
{
response.Append(temp + "\r\n");
}
errorStr = false;

sr.Dispose();

return response.ToString();
}
catch (Exception exception1)
{
errorStr = true;
return ("错误：" + exception1.Message);
}
}

[TNT_1st_excellence]

http://www.baidu.com/s?wd=美女&cl=3


是由于你输入的是＂汉字－－美女＂，当你输入英文时，是不会出现乱吗．
百度输入汉字时，可能有编码的处理．

http://www.baidu.com/s?ie=gb2312&bs=%C3%C0%C8%CB&sr=&z=&cl=3&f=8&wd=%C3%C0%C5%AE&ct=0

[Aimarzhang]

TNT_1st_excellence：
确实如你所说，但是在百度中，如果我把汉字转成unicode码和百度的是不一样的，百度他是自己处理的编码？

[Aimarzhang]

解决了，百度url中的关键字采用的是GB2312编码
多谢大家