HttpWebRequest乱码问题

Atai-Lu 2008-04-24 10:38:03

public static string getWebContent(string Url, string referer, string ch)
{
string strResult = "";
try
{
HttpWebRequest request = (HttpWebRequest)WebRequest.Create(Url);
request.Timeout = 30000;//设置连接超时时间
request.UserAgent = "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.2; ccdotnet ; .NET CLR 1.1.4322; .NET CLR 2.0.50727)";
request.Referer = referer;//设置标头
request.AllowAutoRedirect = true;
//不用缓存
//request.Headers.Set("Pragma", "no-cache");//不用缓存的话,对方服务器返回500错误
HttpWebResponse response = (HttpWebResponse)request.GetResponse();
Stream streamReceive = response.GetResponseStream();
Encoding encoding = Encoding.GetEncoding(ch);
StreamReader streamReader = new StreamReader(streamReceive, encoding);
strResult = streamReader.ReadToEnd();
}
catch (Exception ex) { HttpContext.Current.Response.Write(ex.ToString()); }
return strResult;
}
//抓取的地址http://www.qidian.com/BookReader/180029.aspx
//编码设置为gb2312,目标网址编码也是gb2312,但是返回结果是乱码,有什么解决的办法没?

...全文
1176 44 打赏 收藏 转发到动态 举报
写回复
用AI写文章
44 条回复
切换为时间正序
请发表友善的回复…
发表回复
feisunsunnys 2010-11-10
  • 打赏
  • 举报
回复
Encoding encoding = Encoding.GetEncoding("GBK");

byte[] data = encoding.GetBytes("xml=" + content);

HttpWebRequest myRequest = (HttpWebRequest)WebRequest.Create(url);

myRequest.Method = "POST";

myRequest.UserAgent = "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.2; .NET CLR 1.1.4322; .NET CLR 2.0.50727)";

myRequest.ContentType = "application/x-www-form-urlencoded;charset=utf-8";

myRequest.ContentLength = data.Length;

Stream newStream = myRequest.GetRequestStream();

newStream.Write(data, 0, data.Length);

newStream.Close();

HttpWebResponse response = (HttpWebResponse)myRequest.GetResponse();

switch (response.CharacterSet.ToLower())
{
case "utf-8":
encoding = System.Text.Encoding.GetEncoding("utf-8");
break;
case "gb2312":
encoding = System.Text.Encoding.GetEncoding("gb2312");
break;
default:
encoding = System.Text.Encoding.GetEncoding("utf-8");
break;
}

StreamReader sr = new StreamReader(response.GetResponseStream(), encoding);

s = sr.ReadToEnd();

response.Close();
Joson.e8love 2009-03-03
  • 打赏
  • 举报
回复
mark
supnightmare 2008-05-07
  • 打赏
  • 举报
回复
这个乱码问题很是复杂,我也是,做一个网站,只有点击找回密码时,那张页面就出现乱码,其它页面都好好的.这个问题很是头痛,网站和空间的权限也是有关系的.
jrl5365 2008-04-25
  • 打赏
  • 举报
回复
/// <summary>
/// 得到页面HTML代码(PagePath地址为URL绝对地址)
/// </summary>
/// <param name="PagePath">页面地址(PagePath地址为URL绝对地址)</param>
/// <returns></returns>
public string GetUrlHtml(string PagePath)
{
string BackHtml;
Uri uri = new Uri(PagePath);
WebRequest req = WebRequest.Create(uri);
WebResponse resp = req.GetResponse();
Stream str = resp.GetResponseStream();
StreamReader sr = new StreamReader(str, System.Text.Encoding.UTF8);
return BackHtml = sr.ReadToEnd();
}
diffmaker 2008-04-24
  • 打赏
  • 举报
回复
我也试了一下,确实是乱码
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
楼上的...
Web.Config本来就有设置这个

而且,抓取的数据跟这个设置没多大关系吧???
前几天抓取的数据还正常,今天试了一下,成乱码了...
nonoliving 2008-04-24
  • 打赏
  • 举报
回复
requestEncoding="utf-8/gb2312" responseEncoding="utf-8/gb2312" fileEncoding="utf-8/gb2312"
webconfig设置一下。
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
你试试就知道了...
返回的结果还是乱码
gauzxj 2008-04-24
  • 打赏
  • 举报
回复
用默认default编码应该不会有很大的问题
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
.net版人气真高啊...
以后来这里混算了~哎
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
utf-8乱得更彻底...
lovehongyun 2008-04-24
  • 打赏
  • 举报
回复
utf-8试试.
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
不行...
还是一样
wszhoho 2008-04-24
  • 打赏
  • 举报
回复
Encoding encoding = Encoding.GetEncoding(ch);----->Encoding encoding = Encoding.Default;
lovehongyun 2008-04-24
  • 打赏
  • 举报
回复
o_o
abchappybear 2008-04-24
  • 打赏
  • 举报
回复
以前也遇到过,学习学习...
wangfan113 2008-04-24
  • 打赏
  • 举报
回复
我也遇到过这种问题

关注下....
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
[Quote=引用 34 楼 wszhoho 的回复:]
已经测试成功了,代码打包地址:http://www.fs2you.com/zh-cn/files/2d9a39ba-11d6-11dd-b7f2-0014221b798a/
[/Quote]
HoHo,你的代码我也下下来了...
Atai-Lu 2008-04-24
  • 打赏
  • 举报
回复
感谢wszhoho(逐日★风) 与sillyfox(傻狐狸) 两位老兄,明天加分再结贴

问题已经解决

本来想立即结贴的,但是今天还不能加分^_^
wszhoho 2008-04-24
  • 打赏
  • 举报
回复
加载更多回复(23)
内容概要:本文围绕基于两阶段鲁棒优化算法的微网多电源容量配置问题展开研究,针对微电网中风能、光伏、柴油发电机及储能系统等多元电源的容量规划难题,提出了一种能够有效应对源荷不确定性的优化方法。该方法采用两阶段鲁棒优化框架,第一阶段确定电源的最优配置容量,第二阶段通过调整运行策略应对不确定性扰动,从而提升系统在复杂环境下的适应性与经济性。文中结合Matlab实现了完整的算法建模与仿真验证,提供了清晰的代码实现路径,展示了模型在典型场景下的求解过程与结果分析,具有较强的工程应用价值。; 适合人群:具备一定电力系统基础知识和Matlab编程能力,从事新能源、微电网、优化调度等相关领域的科研人员及研究生。; 使用场景及目标:①解决含高比例可再生能源的微电网系统中电源容量配置的鲁棒性问题;②掌握两阶段鲁棒优化建模方法及其在能源系统中的实际应用;③为应对源荷不确定性提供可复现的技术方案与仿真工具支持; 阅读建议:此资源侧重于算法建模与实际仿真相结合,建议读者在理解鲁棒优化基本理论的基础上,结合Matlab代码逐模块分析,重点掌握不确定集构建、列与约束生成(C&CG)算法实现以及运行结果的经济性与可靠性评估方法,以实现从理论到实践的贯通。

62,263

社区成员

发帖
与我相关
我的任务
社区描述
.NET技术交流专区
javascript云原生 企业社区
社区管理员
  • ASP.NET
  • .Net开发者社区
  • R小R
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

.NET 社区是一个围绕开源 .NET 的开放、热情、创新、包容的技术社区。社区致力于为广大 .NET 爱好者提供一个良好的知识共享、协同互助的 .NET 技术交流环境。我们尊重不同意见,支持健康理性的辩论和互动,反对歧视和攻击。

希望和大家一起共同营造一个活跃、友好的社区氛围。

试试用AI创作助手写篇文章吧