求教：网页抓取报：502网关错误

yannan_liv 2012-04-12 04:54:16

我分别用了两种方式进行网页（html）源文件代码的抓取，WebClient.DownloadString或者WebResponse方式都报同一个错误：502 网关错误。
这个错是突然出现的，在此之前我已经从同一个网站成功抓取过很多数据了，而且现在的现象的用IE可以打开URL，并且支持“查看源代码”，但从代码里便不行了。
请路过大虾不吝指点……

...全文

150 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

Carpathia 2012-04-12

打赏
举报

回复

地址拿来

1、引言京东的京麦商家后台2014年构建网关，从HTTP网关发展到TCP网关。在2016年重构完成基于Netty4.x+Protobuf3.x实现对接PC和App上下行通信的高可用、高性能、高稳定的TCP长连接网关。早期京麦搭建HTTP和TCP长连接功能主要用于消息通知的推送，并未应用于API网关。随着逐...

什么是Web缓存，为什么要使用它？缓存的类型：浏览器缓存；代理服务器缓存；网关缓存； Web缓存无害吗？为什么要鼓励缓存？ Web缓存如何工作如何控制缓存和不缓存： H

本文由微信开发团队人员编写，转自 WeMobileDev，感谢。一引言在2013年11月中旬时，因为基础组件组人手紧张，Leo安排我和春哥去广州轮岗支援。刚到广州的时候，Ray让我和春哥对Line和WhatsApp的心跳机制进行分析。我和春哥抓包测试了差不多两个多礼拜，在我们基本上摸清了Line和WhatsApp的心跳机制后，Ray才告诉我们真正的任务——对微信的固定心跳进行优化，并告诉我们这不是一件容易的事情。于是我和春哥开始构思第一个方案，我...

Flash Socket应用页面使用 Socket 底层传输数据的方便比传统的 HTTP 协议更隐秘，浏览器基本不对基于 TCP 通信的 Socket 进行监测，因此也无法通过浏览器提供的开发者工具来探测网站的受保护数据。例如，音悦台网站上的高铃 - 爱してる-高清【MV】，其视频内容通过 Socket 进行传输，浏览者根本发现不了其视频数据，也无法找到浏览器有缓存到数据。打开视

Soft http://www.donews.net/eb 国内破解论坛 ★万花筒极酷大论坛★中国狂热破解联盟论坛★中国破解联盟论坛★天天精品论坛★汉化新世纪论坛★说吧朋友社区★赢政天下论坛★阿榕软件论坛★霏凡软件论坛★龙族联盟论坛优秀技术站点 ★Delphi园地★Delphi大富翁★Delphi盒子★Dingl.com★itpub论坛★JavaWorld技术论坛★JAVA中文

110,533

社区成员

642,574

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

让您成为最强悍的C#开发者

试试用AI创作助手写篇文章吧

+ 用AI写文章