线程调度机制

malone1 2011-03-17 05:15:02

比如我现在有一个服务器的项目，主要工作是接收client请求，并读取server数据通过socket发送给client.可以通过线程池来处理。我创建线程池的时候创建20个线程来处理。但是当有大量client连接的时候，任务队列上已经有比较多的任务等待处理，这个时候我可能需要增加线程池线程的数量来提高处理能（需要计算和读取文件），但是需要增加多少线程呢？这个是否有什么方法可以确定。

做过大并发服务器的同志说说经验撒。你们现在用的服务器动态调整线程数量吗？机制是什么？谢谢各位

...全文

217 8 打赏收藏转发到动态举报

写回复

8 条回复

切换为时间正序

请发表友善的回复…

发表回复

太乙 2011-03-18

打赏
举报

回复

加大线程也不行的！！！！

毕竟机器的处理能力有限！！！！！！！！

线程数太大反而适得其反！！

加机器，加核吧！！！！！！！

malone1 2011-03-18

打赏
举报

回复

ccltiancai 2011-03-17

打赏
举报

回复

那就木办法了，你计算密集型的线程。。根据服务器配置适当加线程吧。。但是肯定也只能加到适量。。服务器上不去木办法啊= =

wbruce 2011-03-17

打赏
举报

回复

[Quote=引用 4 楼 ccltiancai 的回复:]
计算大，连接时间长的服务用per client per thread或者thread pool不是悲剧吗。。。你又不是人家apache做短链接的。。。

换高并发模型吧
iocp,epoll
[/Quote]

这里说的线程池是针对任务处理的，不是针对client的连接。

ccltiancai 2011-03-17

打赏
举报

回复

计算大，连接时间长的服务用per client per thread或者thread pool不是悲剧吗。。。你又不是人家apache做短链接的。。。

换高并发模型吧
iocp,epoll

wbruce 2011-03-17

打赏
举报

回复

之前做过类似的东西，但是我的线程处理的逻辑相对比较简单。
在1万个client连接的情况下，10线程去处理消息逻辑都没问题。
所以没有遇到楼主这样的麻烦，我觉得是不是应该看下瓶颈在哪里，
例如是否可以提高一下每个任务的处理效率。

bdmh 2011-03-17

打赏
举报

回复

没有定论，根据你服务器的承受能力，和运算效率以及客户端数量，测试一个值吧

libevent多线程, 参考mariotcp 参考http://blog.csdn.net/i_am_jojo/article/details/7587838流程图

内容简介《POSIX多线程程序设计》深入描述了IEEE的开放系统接口标准——POSIX线程，通常称为Pthreads标准。本书首先解释了线程的基本概念，包括异步编程、线程的生命周期和同步机制；然后讨论了一些高级话题，包括属性对象、线程私有数据和实时调度。此外，本书还讨论了调度的问题，并给出了避免错误和提高性能等问题的有价值的建议。本书使用了大量注释过后实例来解释实际的概念，并包括Pthreads的简单索引和对标准化的展望。《POSIX多线程程序设计》适合有经验的C语言程序员阅读，也适合多线程人员参考。

多线程编程技术开发资料.pdf 个人收集电子书，仅用学习使用，不可用于商业用途，如有版权问题，请联系删除！

Programming with POSIX Threads 英文版+ 中文版+源码

《计算机操作系统》可作为计算机硬件和软件以及计算机通信专业的本科生教材，也可作为从事计算机及通信工作的相关科技人员的参考书。目录第一章　操作系统引论 1.1　操作系统的目标和作用 1 1.1.1　操作系统的目标 1 1.1.2　操作系统的作用 2 1.1.3　推动操作系统发展的主要动力 4 1.2　操作系统的发展过程 5 1.2.1　无操作系统的计算机系统 5 1.2.2　单道批处理系统 6 1.2.3　多道批处理系统 7 1.2.4　分时系统 9 1.2.5　实时系统 11 1.2.6 微机操作系统的发展 12 1.3　操作系统的基本特性 14 1.3.1 并发性 14 1.3.2　共享性 15 1.3.3　虚拟技术 16 1.3.4　异步性 17 1.4　操作系统的主要功能 18 1.4.1　处理机管理功能 18 1.4.2　存储器管理功能 19 1.4.3　设备管理功能 21 1.4.4　文件管理功能 21 1.4.5　操作系统与用户之间的接口 22 1.5 OS结构设计 24 1.5.1 传统的操作系统结构 24 1.5.2 客户/服务器模式 26 1.5.3 面向对象的程序设计 27 1.5.4　微内核OS结构 29 习题 33 第二章　进程管理 2.1　进程的基本概念 34 2.1.1　程序的顺序执行及其特征 34 2.1.2　前趋图 35 2.1.3　程序的并发执行及其特征 36 2.1.4　进程的特征与状态 37 2.1.5　进程控制块 41 2.2　进程控制 43 2.2.1　进程的创建 43 2.2.2　进程的终止 45 2.2.3　进程的阻塞与唤醒 46 2.2.4　进程的挂起与激活 47 2.3　进程同步 47 2.3.1　进程同步的基本概念 47 2.3.2　信号量机制 50 2.3.3　信号量的应用 53 2.3.4　管程机制 55 2.4　经典进程的同步问题 58 2.4.1　生产者—消费者问题 58 2.4.2　哲学家进餐问题 61 2.4.3　读者—写者问题 63 2.5 进程通信 65 2.5.1　进程通信的类型 65 2.5.2　消息传递通信的实现方法 66 2.5.3　消息传递系统实现中的若干问题 68 2.5.4　消息缓冲队列通信机制 69 2.6　线程 71 2.6.1　线程的基本概念 72 2.6.2　线程间的同步和通信 75 2.6.3　线程的实现方式 77 2.6.4　线程的实现 78 习题 81 第三章　处理机调度与死锁 3.1　处理机调度的层次 84 3.1.1　高级调度 84 3.1.2 低级调度 86 3.1.3 中级调度 87 3.2 调度队列模型和调度准则 88 3.2.1　调度队列模型 88 3.2.2　选择调度方式和调度算法的若干准则 90 3.3　调度算法 91 3.3.1　先来先服务和短作业(进程)优先调度算法 91 3.3.2　高优先权优先调度算法 93 3.3.3　基于时间片的轮转调度算法 95 3.4　实时调度 97 3.4.1　实现实时调度的基本条件 97 3.4.2　实时调度算法的分类 99 3.4.3　常用的几种实时调度算法 100 3.5　产生死锁的原因和必要条件 103 3.5.1　产生死锁的原因 103 3.5.2　产生死锁的必要条件 105 3.5.3　处理死锁的基本方法 105 3.6　预防死锁的方法 106 3.6.1　预防死锁 106 3.6.2　系统安全状态 107 3.6.3　利用银行家算法避免死锁 108 3.7　死锁的检测与解除 111 3.7.1　死锁的检测 111 3.7.2　死锁的解除 113 习题 114 第四章　存储器管理 4.1 存储器的层次结构 116 4.1.1 多级存储器结构 116 4.1.2 主存储器与寄存器 117 4.1.3 高速缓存和磁盘缓存 117 4.2　程序的装入和链接 118 4.2.1　程序的装入 118 4.2.2　程序的链接 120 4.3　连续分配方式 121 4.3.1　单一连续分配 121 4.3.2　固定分区分配 122 4.3.3　动态分区分配 123 4.3.4　伙伴系统 126 4.3.5 哈希算法 126 4.3.6　可重定位分区分配 127 4.3.7　对换 129 4.4　基本分页存储管理方式 130 4.4.1　页面与页表 130 4.4.2　地址变换机构 131 4.4.3　两级和多级页表 133 4.5　基本分段存储管理方

65,187

社区成员

250,526

社区内容

发帖

与我相关

我的任务

c++ 技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

请不要发布与C++技术无关的贴子
请不要发布与技术无关的招聘、广告的帖子
请尽可能的描述清楚你的问题，如果涉及到代码请尽可能的格式化一下

试试用AI创作助手写篇文章吧

+ 用AI写文章