关于 Parallel.ForEach 并行库的一个问题

2016-09-11 08:59:45 753 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

for，foreach，Parallel.for与Parallel.foreach相关性能分析 for，foreach，Parallel.for与Parallel.foreach相关性能分析业务背景parallel并发编程相关介绍概念优化代码块优化分析使用工具使用方法测试计划测试场景测试结果For循环Foreach循环Parallel.For循环Parallel.Foreach循环数据整理数据分析与总结分析总结名词解释业务背景 1.需要从ES表中获取大量数据，需要一次获取23张表中数据内容，其中涵盖了订单数据，通信连接数据，状态信息数据，测量数据以及配置信息等数据的获取，内部每次获取均需要进行相应接阅读详情

Parallel.ForEach 的MaxDegreeOfParallelism 参数是不是对主机的cpu核心有要求?
vps和云服务器的cpu 核心数是不是有区别?

我的程序要批量调用一个webapi接口, 以前在自己的电脑上MaxDegreeOfParallelism=10,跑的不错,然后放在了亚马逊云上(那个免费的1cpu核心,1g内存的微服务器),跑的也很流畅
然后前几天亚马逊云要收费了就换了一个vps, 然后这程序就卡主了,以前跑这个1s左右, 现在要3-10分钟, 最开始是怀疑网络有问题
检查了下网络 ,确实是比亚马逊云慢些, 亚马逊的网络延时大概是40ms ,这个要400ms, 但是就算不用并行一个个的访问也不要这么久啊 ,然后就查看代码 ,看到MaxDegreeOfParallelism这里,想到以前看到资料说, 多任务进程最好不要超过核心数的2倍, 然后改成MaxDegreeOfParallelism=4, 立马就只需要5-10s了,
这是为什么有这么大的区别?

...全文

达梦数据库JDBC连接池断开自动重连设置一、场景在网络状况不是非常良好，经常会出现暂时性的拥塞或者断开的情况，而且当我们重启数据库时也会发生类似的情况。所以需要配置中间件的连接池来实现连接测试以及自动重连，通过重新配置连接池，成功解决了这个问题。下面会给出一份数据源配置参数详单和一份推荐的数据源配置项。二、连接池配置参数 1. initialSize：连接池启动时创建的初始化连接数量 2. maxActive：连接池中可同时连接的最大的连接数 3. maxIdle：连接池中最大的空闲的连接数，超过的空闲连接将被释放，如果设置为负阅读详情

ayun00

C# 111,128 成员 642,537 内容

+ 关注 + 加入社区

切换为时间正序

ayun00 2017-01-24

打赏
举报

引用 8 楼 sp1234 的回复:

[quote=引用 6 楼 ayun00 的回复:] [quote=引用 5 楼 sp1234 的回复:] 倒是网络带宽跑满

不清楚做vps服务商的是不是有什么特殊的限制,还是软件本身有性能瓶颈在上面架设文件服务器,单文件可以达到500K下载速度, 多文件总的下载速度可以达到2000K, 按理来说我的瞬发不会超过这个限制? 我询问服务商是否有限制,得到的回答都是没有[/quote] 你在 #3 楼说询问了有结果，原来你也是不知道结果啊。那么你可以判断一下，并发数达到多少，就被人家系统禁止。[/quote] 是2个层面, 服务商是说自己没有限制, 但是网络到国内的线路节点不是很通畅

ayun00 2017-01-23