用webclient抓取新浪财经的数据很慢,求帮忙解决

morebread 2013-10-20 08:26:32
写了个小工具用来采集新浪财经的证券信息页面的数据。发现在采集的时候速度非常慢,200k/s已经是最大速度了,一般在80K/s左右,但是我这边的网络是10M的光纤。代码如下

private void Thread_read(object obj)
{
int count = 0;
while (true)
{
try
{
WebClient client = new WebClient();
byte[] myDataBuffer = client.DownloadData(string.Format("http://vip.stock.finance.sina.com.cn/corp/go.php/vCI_CorpInfo/stockid/{0}.phtml", ss[count++]));
}
catch (System.Exception ex)
{
MessageBox.Show(ex.Message);
}
}
}


这个是线程函数,用来测试性能的。程序起了20个这样的线程,ss是一个string数组,里面存放了不同的证券代码,一共大概2000多个。照理说20个线程同时下载起码会把带宽给占满,但是现在才80~200k/s之间徘徊。请问是什么问题??
...全文
353 5 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
5 条回复
切换为时间正序
请发表友善的回复…
发表回复
showjim 2013-10-21
  • 打赏
  • 举报
回复
有可能是下载实例数量不够,有可能是ServicePointManager.DefaultConnectionLimit太小,有可能是对方服务器的带宽限制。
winner2050 2013-10-20
  • 打赏
  • 举报
回复
我常年采集数据。 这种现象很正常,尽管迅雷能疯狂下载数据,采集速度却无法填满宽带。
bdmh 2013-10-20
  • 打赏
  • 举报
回复
实际与理想往往差距甚远,达不到理想效果跟很多因素有关,服务器的效率,宽带商是否奸商,网路是否良好
threenewbee 2013-10-20
  • 打赏
  • 举报
回复
先测试下,同时运行几个这样的程序能提高带宽的利用么?
morebread 2013-10-20
  • 打赏
  • 举报
回复
需要测试的话我可以把ss数组里的内容放上来
在Windows 10或Windows 11操作系统中,用户经常会遇到共享打印机时出现的一系列错误代码,这些错误代码可能会阻碍打印机共享功能的正常使用。常见的错误代码包括0x00000057、0x00000709和0x0000011b,这些代码通常指出了不同的问题,比如权限不足、服务未运行或配置错误等。除此之外,还有一些故障提示如“连接失败”或“内存不足”,这些都可能影响到打印机共享的稳定性。 要解决这些故障,首先要确保打印机已经正确地连接到网络,并且在需要共享的电脑上进行了设置。确保打印机驱动程序是最新的,并且在共享设置中没有错误配置。对于权限问题,需要检查网络上的用户账户是否具有足够的权限来访问共享打印机。同时,也要确保打印机服务正在运行,特别是“Print Spooler”服务,因为这是打印机共享服务的核心组件。 在某些情况下,问题可能与操作系统的更新有关,如升级到最新版的Windows 10或Windows 11后可能出现的兼容性问题。这时,可能需要查看微软的官方支持文档来获取特定的解决方案或更新。 对于错误代码0x00000057,这通常是由于没有足够的权限来访问网络打印机或其共享资源,解决方法是确保网络打印机的权限设置正确,包括在组策略中设置相应的访问权限。而0x00000709错误可能是由于打印机驱动问题或打印机端口配置错误,可以尝试重新安装或更新打印机驱动来解决。至于0x0000011b错误,这往往是因为打印机队列服务的问题,检查并重启“Print Spooler”服务通常是解决这类问题的常见手段。 至于“连接失败”或“内存不足”这类故障,通常与客户端和打印机之间的网络连接以及打印机本地资源的使用情况有关。检查网络连接,确保打印机所在的网络段没有故障或中断。同时,如果打印机的打印队列长时间得不到处理,可能会导致内存不足的情况,这时可能需要清理打印队列或增加打印机的内存配置。 为了帮助用户更快速地解决这些问题,市面上出现了各种打印机共享错误修复工具。这些工具往往通过预设的修复程序来自动检测和修正打印机共享中常见的问题。它们可以快速检查打印机驱动、网络连接以及共享设置,并且能够提供一键修复功能,大幅减少了用户自行排查和解决问题的难度。 然而,在使用这些修复工具之前,用户应确保这些工具的来源是安全可靠的,避免因使用不当的修复工具而引发其他系统安全或隐私问题。用户可以到官方平台或者信誉良好的软件提供商处下载这些工具。通过细心检查打印机的共享设置,及时更新驱动程序和服务,以及合理使用修复工具,大多数共享打印机的问题都可以得到有效的解决

111,098

社区成员

发帖
与我相关
我的任务
社区描述
.NET技术 C#
社区管理员
  • C#
  • AIGC Browser
  • by_封爱
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

让您成为最强悍的C#开发者

试试用AI创作助手写篇文章吧