线程池能解决500个线程实时刷新的问题吗

寞寞足下 2017-06-20 09:39:56
公司一个项目要有500个线程，而且每个线程都会从设备读取实时值，最后把实时的值传入数据库。
这里面我想用一个线程池来放置这500个线程，不知道能不能实现实时刷新，不卡顿程序的要求，大佬们给点建议
环境：c++ windows
编程：vs2008（08支持线程池吗？）
...全文
294 15 打赏 收藏 转发到动态 举报
写回复
用AI写文章
15 条回复
切换为时间正序
请发表友善的回复…
发表回复
寞寞足下 2017-06-21
  • 打赏
  • 举报
 回复
谢谢大家，问题解决了，结贴
寞寞足下 2017-06-21
  • 打赏
  • 举报
 回复
引用 10 楼 lianshaohua 的回复:
[quote=引用 9 楼 u014734032 的回复:] [quote=引用 7 楼 lianshaohua 的回复:] [quote=引用 6 楼 u014734032 的回复:] [quote=引用 5 楼 lianshaohua 的回复:] [quote=引用 3 楼 u014734032 的回复:] [quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已[/quote] 是用一个循环实现500个接口的数据采集，不一定要500个线程[/quote] 是的，如果是网口的话，一两个线程足矣[/quote] 比较恶心的是，程序中不仅要对这些通道进行读取/写入操作，还需要把读取的数据存入数据库。一两个线程可能解决不了问题[/quote] 1、读写数据一两个线程，把解析后的数据放到队列中， 2、写入数据库一个线程，从队列中读取解析的数据并写入数据库[/quote] 明白了，用一个线程做循环来读\写硬件。只读取\写入基本数据，循环的实现比500个线程要好。 另一个线程存数据库。
ztenv 版主 2017-06-21
  • 打赏
  • 举报
 回复
引用 13 楼 u014734032 的回复:
[quote=引用 10 楼 lianshaohua 的回复:] [quote=引用 9 楼 u014734032 的回复:] [quote=引用 7 楼 lianshaohua 的回复:] [quote=引用 6 楼 u014734032 的回复:] [quote=引用 5 楼 lianshaohua 的回复:] [quote=引用 3 楼 u014734032 的回复:] [quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已[/quote] 是用一个循环实现500个接口的数据采集，不一定要500个线程[/quote] 是的，如果是网口的话，一两个线程足矣[/quote] 比较恶心的是，程序中不仅要对这些通道进行读取/写入操作，还需要把读取的数据存入数据库。一两个线程可能解决不了问题[/quote] 1、读写数据一两个线程，把解析后的数据放到队列中， 2、写入数据库一个线程，从队列中读取解析的数据并写入数据库[/quote] 明白了，用一个线程做循环来读\写硬件。只读取\写入基本数据，循环的实现比500个线程要好。 另一个线程存数据库。[/quote] 基本正确，读写硬件示情况可以使用1－cpu核数个线程处理；一个线程写数据库足矣。
ztenv 版主 2017-06-20
  • 打赏
  • 举报
 回复
引用 3 楼 u014734032 的回复:
[quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已
赵4老师 2017-06-20
  • 打赏
  • 举报
 回复
仅供参考：
//循环向a函数每次发送200个字节长度（这个是固定的）的buffer,
//a函数中需要将循环传进来的buffer，组成240字节（也是固定的）的新buffer进行处理，
//在处理的时候每次从新buffer中取两个字节打印
#ifdef _MSC_VER
    #pragma warning(disable:4996)
#endif
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#ifdef _MSC_VER
    #include <windows.h>
    #include <process.h>
    #include <io.h>
    #define  MYVOID             void
    #define  vsnprintf          _vsnprintf
#else
    #include <unistd.h>
    #include <sys/time.h>
    #include <pthread.h>
    #define  CRITICAL_SECTION   pthread_mutex_t
    #define  MYVOID             void *
#endif
//Log{
#define MAXLOGSIZE 20000000
#define MAXLINSIZE 16000
#include <time.h>
#include <sys/timeb.h>
#include <stdarg.h>
char logfilename1[]="MyLog1.log";
char logfilename2[]="MyLog2.log";
static char logstr[MAXLINSIZE+1];
char datestr[16];
char timestr[16];
char mss[4];
CRITICAL_SECTION cs_log;
FILE *flog;
#ifdef _MSC_VER
void Lock(CRITICAL_SECTION *l) {
    EnterCriticalSection(l);
}
void Unlock(CRITICAL_SECTION *l) {
    LeaveCriticalSection(l);
}
void sleep_ms(int ms) {
    Sleep(ms);
}
#else
void Lock(CRITICAL_SECTION *l) {
    pthread_mutex_lock(l);
}
void Unlock(CRITICAL_SECTION *l) {
    pthread_mutex_unlock(l);
}
void sleep_ms(int ms) {
    usleep(ms*1000);
}
#endif
void LogV(const char *pszFmt,va_list argp) {
    struct tm *now;
    struct timeb tb;

    if (NULL==pszFmt||0==pszFmt[0]) return;
    vsnprintf(logstr,MAXLINSIZE,pszFmt,argp);
    ftime(&tb);
    now=localtime(&tb.time);
    sprintf(datestr,"%04d-%02d-%02d",now->tm_year+1900,now->tm_mon+1,now->tm_mday);
    sprintf(timestr,"%02d:%02d:%02d",now->tm_hour     ,now->tm_min  ,now->tm_sec );
    sprintf(mss,"%03d",tb.millitm);
    printf("%s %s.%s %s",datestr,timestr,mss,logstr);
    flog=fopen(logfilename1,"a");
    if (NULL!=flog) {
        fprintf(flog,"%s %s.%s %s",datestr,timestr,mss,logstr);
        if (ftell(flog)>MAXLOGSIZE) {
            fclose(flog);
            if (rename(logfilename1,logfilename2)) {
                remove(logfilename2);
                rename(logfilename1,logfilename2);
            }
        } else {
            fclose(flog);
        }
    }
}
void Log(const char *pszFmt,...) {
    va_list argp;

    Lock(&cs_log);
    va_start(argp,pszFmt);
    LogV(pszFmt,argp);
    va_end(argp);
    Unlock(&cs_log);
}
//Log}
#define ASIZE    200
#define BSIZE    240
#define CSIZE      2
char Abuf[ASIZE];
char Cbuf[CSIZE];
CRITICAL_SECTION cs_HEX;
CRITICAL_SECTION cs_BBB;
struct FIFO_BUFFER {
    int  head;
    int  tail;
    int  size;
    char data[BSIZE];
} BBB;
int No_Loop=0;
void HexDump(int cn,char *buf,int len) {
    int i,j,k;
    char binstr[80];

    Lock(&cs_HEX);
    for (i=0;i<len;i++) {
        if (0==(i%16)) {
            sprintf(binstr,"%03d %04x -",cn,i);
            sprintf(binstr,"%s %02x",binstr,(unsigned char)buf[i]);
        } else if (15==(i%16)) {
            sprintf(binstr,"%s %02x",binstr,(unsigned char)buf[i]);
            sprintf(binstr,"%s  ",binstr);
            for (j=i-15;j<=i;j++) {
                sprintf(binstr,"%s%c",binstr,('!'<buf[j]&&buf[j]<='~')?buf[j]:'.');
            }
            Log("%s\n",binstr);
        } else {
            sprintf(binstr,"%s %02x",binstr,(unsigned char)buf[i]);
        }
    }
    if (0!=(i%16)) {
        k=16-(i%16);
        for (j=0;j<k;j++) {
            sprintf(binstr,"%s   ",binstr);
        }
        sprintf(binstr,"%s  ",binstr);
        k=16-k;
        for (j=i-k;j<i;j++) {
            sprintf(binstr,"%s%c",binstr,('!'<buf[j]&&buf[j]<='~')?buf[j]:'.');
        }
        Log("%s\n",binstr);
    }
    Unlock(&cs_HEX);
}
int GetFromRBuf(int cn,CRITICAL_SECTION *cs,struct FIFO_BUFFER *fbuf,char *buf,int len) {
    int lent,len1,len2;

    lent=0;
    Lock(cs);
    if (fbuf->size>=len) {
        lent=len;
        if (fbuf->head+lent>BSIZE) {
            len1=BSIZE-fbuf->head;
            memcpy(buf     ,fbuf->data+fbuf->head,len1);
            len2=lent-len1;
            memcpy(buf+len1,fbuf->data           ,len2);
            fbuf->head=len2;
        } else {
            memcpy(buf     ,fbuf->data+fbuf->head,lent);
            fbuf->head+=lent;
        }
        fbuf->size-=lent;
    }
    Unlock(cs);
    return lent;
}
MYVOID thdB(void *pcn) {
    char        *recv_buf;
    int          recv_nbytes;
    int          cn;
    int          wc;
    int          pb;

    cn=(int)pcn;
    Log("%03d thdB              thread begin...\n",cn);
    while (1) {
        sleep_ms(10);
        recv_buf=(char *)Cbuf;
        recv_nbytes=CSIZE;
        wc=0;
        while (1) {
            pb=GetFromRBuf(cn,&cs_BBB,&BBB,recv_buf,recv_nbytes);
            if (pb) {
                Log("%03d recv %d bytes\n",cn,pb);
                HexDump(cn,recv_buf,pb);
                sleep_ms(1);
            } else {
                sleep_ms(1000);
            }
            if (No_Loop) break;//
            wc++;
            if (wc>3600) Log("%03d %d==wc>3600!\n",cn,wc);
        }
        if (No_Loop) break;//
    }
#ifndef _MSC_VER
    pthread_exit(NULL);
#endif
}
int PutToRBuf(int cn,CRITICAL_SECTION *cs,struct FIFO_BUFFER *fbuf,char *buf,int len) {
    int lent,len1,len2;

    Lock(cs);
    lent=len;
    if (fbuf->size+lent>BSIZE) {
        lent=BSIZE-fbuf->size;
    }
    if (fbuf->tail+lent>BSIZE) {
        len1=BSIZE-fbuf->tail;
        memcpy(fbuf->data+fbuf->tail,buf     ,len1);
        len2=lent-len1;
        memcpy(fbuf->data           ,buf+len1,len2);
        fbuf->tail=len2;
    } else {
        memcpy(fbuf->data+fbuf->tail,buf     ,lent);
        fbuf->tail+=lent;
    }
    fbuf->size+=lent;
    Unlock(cs);
    return lent;
}
MYVOID thdA(void *pcn) {
    char        *send_buf;
    int          send_nbytes;
    int          cn;
    int          wc;
    int           a;
    int          pa;

    cn=(int)pcn;
    Log("%03d thdA              thread begin...\n",cn);
    a=0;
    while (1) {
        sleep_ms(100);
        memset(Abuf,a,ASIZE);
        a=(a+1)%256;
        if (16==a) {No_Loop=1;break;}//去掉这句可以让程序一直循环直到按Ctrl+C或Ctrl+Break或当前目录下存在文件No_Loop
        send_buf=(char *)Abuf;
        send_nbytes=ASIZE;
        Log("%03d sending %d bytes\n",cn,send_nbytes);
        HexDump(cn,send_buf,send_nbytes);
        wc=0;
        while (1) {
            pa=PutToRBuf(cn,&cs_BBB,&BBB,send_buf,send_nbytes);
            Log("%03d sent %d bytes\n",cn,pa);
            HexDump(cn,send_buf,pa);
            send_buf+=pa;
            send_nbytes-=pa;
            if (send_nbytes<=0) break;//
            sleep_ms(1000);
            if (No_Loop) break;//
            wc++;
            if (wc>3600) Log("%03d %d==wc>3600!\n",cn,wc);
        }
        if (No_Loop) break;//
    }
#ifndef _MSC_VER
    pthread_exit(NULL);
#endif
}
int main() {
#ifdef _MSC_VER
    InitializeCriticalSection(&cs_log);
    InitializeCriticalSection(&cs_HEX);
    InitializeCriticalSection(&cs_BBB);
#else
    pthread_t threads[2];
    int threadsN;
    int rc;
    pthread_mutex_init(&cs_log,NULL);
    pthread_mutex_init(&cs_HEX,NULL);
    pthread_mutex_init(&cs_BBB,NULL);
#endif
    Log("Start===========================================================\n");

    BBB.head=0;
    BBB.tail=0;
    BBB.size=0;

#ifdef _MSC_VER
    _beginthread((void(__cdecl *)(void *))thdA,0,(void *)1);
    _beginthread((void(__cdecl *)(void *))thdB,0,(void *)2);
#else
    threadsN=0;
    rc=pthread_create(&(threads[threadsN++]),NULL,thdA,(void *)1);if (rc) Log("%d=pthread_create %d error!\n",rc,threadsN-1);
    rc=pthread_create(&(threads[threadsN++]),NULL,thdB,(void *)2);if (rc) Log("%d=pthread_create %d error!\n",rc,threadsN-1);
#endif

    if (!access("No_Loop",0)) {
        remove("No_Loop");
        if (!access("No_Loop",0)) {
            No_Loop=1;
        }
    }
    while (1) {
        sleep_ms(1000);
        if (No_Loop) break;//
        if (!access("No_Loop",0)) {
            No_Loop=1;
        }
    }
    sleep_ms(3000);
    Log("End=============================================================\n");
#ifdef _MSC_VER
    DeleteCriticalSection(&cs_BBB);
    DeleteCriticalSection(&cs_HEX);
    DeleteCriticalSection(&cs_log);
#else
    pthread_mutex_destroy(&cs_BBB);
    pthread_mutex_destroy(&cs_HEX);
    pthread_mutex_destroy(&cs_log);
#endif
    return 0;
}
任何收发两端速度不一致的通讯，都需要在它们之间使用一个足够大的FIFO缓冲区。 对任何FIFO缓冲区的使用，都需要仔细考虑接收端接收时超时无数据和发送端发送时FIFO缓冲区已满这两种情况下该如何做。 这些概念都在这段经典代码中有所体现。 这段经典代码还包括以下必须考虑的因素： ◆跨Windows和Linux平台 ◆多线程锁 ◆多线程日志 ◆日志文件占用的磁盘空间可控 ◆日志中的时间包括毫秒 ◆传输的数据对应的每个字节到底是几 ◆如何退出多线程程序 ◆……
寞寞足下 2017-06-20
  • 打赏
  • 举报
 回复
引用 2 楼 lianshaohua 的回复:
线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库
ztenv 版主 2017-06-20
  • 打赏
  • 举报
 回复
线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
寞寞足下 2017-06-20
  • 打赏
  • 举报
 回复
也求线程池的实例代码，谢谢大佬
赵4老师 2017-06-20
  • 打赏
  • 举报
 回复
Multiple Threads in the User Interface http://msdn.microsoft.com/zh-cn/library/ms810439.aspx
xiaohuh421 2017-06-20
  • 打赏
  • 举报
 回复
线程池的目的, 是解决反复创建线程导致的性能和资源消耗 你这个已经不是线程池能解决的问题. 要求不卡顿, 一般都是界面层, 那么你只需要把所有耗时操作都放到子线程中操作, UI线程自然就不会卡. 当然, 你开了500个线程, 不能把CPU给用完了. cpu 50%以上, 估计就会有点卡了.
ztenv 版主 2017-06-20
  • 打赏
  • 举报
 回复
引用 9 楼 u014734032 的回复:
[quote=引用 7 楼 lianshaohua 的回复:] [quote=引用 6 楼 u014734032 的回复:] [quote=引用 5 楼 lianshaohua 的回复:] [quote=引用 3 楼 u014734032 的回复:] [quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已[/quote] 是用一个循环实现500个接口的数据采集，不一定要500个线程[/quote] 是的，如果是网口的话，一两个线程足矣[/quote] 比较恶心的是，程序中不仅要对这些通道进行读取/写入操作，还需要把读取的数据存入数据库。一两个线程可能解决不了问题[/quote] 1、读写数据一两个线程，把解析后的数据放到队列中， 2、写入数据库一个线程，从队列中读取解析的数据并写入数据库
寞寞足下 2017-06-20
  • 打赏
  • 举报
 回复
引用 7 楼 lianshaohua 的回复:
[quote=引用 6 楼 u014734032 的回复:] [quote=引用 5 楼 lianshaohua 的回复:] [quote=引用 3 楼 u014734032 的回复:] [quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已[/quote] 是用一个循环实现500个接口的数据采集，不一定要500个线程[/quote] 是的，如果是网口的话，一两个线程足矣[/quote] 比较恶心的是，程序中不仅要对这些通道进行读取/写入操作，还需要把读取的数据存入数据库。一两个线程可能解决不了问题
寞寞足下 2017-06-20
  • 打赏
  • 举报
 回复
读取并不阻塞程序，会有值
ztenv 版主 2017-06-20
  • 打赏
  • 举报
 回复
引用 6 楼 u014734032 的回复:
[quote=引用 5 楼 lianshaohua 的回复:] [quote=引用 3 楼 u014734032 的回复:] [quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已[/quote] 是用一个循环实现500个接口的数据采集，不一定要500个线程[/quote] 是的，如果是网口的话，一两个线程足矣
寞寞足下 2017-06-20
  • 打赏
  • 举报
 回复
引用 5 楼 lianshaohua 的回复:
[quote=引用 3 楼 u014734032 的回复:] [quote=引用 2 楼 lianshaohua 的回复:] 线程池可以自己实现，也可以使用第三方库，和工具没有必然的关系。不过你这500个线程都要做什么？IO等待？
在硬件上读取电压、电流等，与硬件用网口通信。每一个线程读取的接口都不同。 读取的数据会保存到数据库[/quote] 网口通信，那就使用非阻塞IO就行了，没必要用这么多线程，你的线程在部分情况下都在等IO的返回而已[/quote] 是用一个循环实现500个接口的数据采集，不一定要500个线程
SwipeRefreshLayout下拉刷新+线程池多线程下载+RecyclerView
通过对SwipeRefreshLayout下拉刷新+线程池多线程下载+RecyclerView的整合实现下拉刷新，支持listview上拉加载，项目和灵活，可以根据自己需求进行改动
ASP.Net 多线程-IIS搭建-线程池-video
1.委托与多线程2.线程池 Socket 3.聊天程序 模拟IIS 4.一般处理程序 11.异步无刷新分页复习+服务器端控件
百度地图开发java源码-wtp:WTP-一个可靠的线程池管理系统
是一个轻量级线程池管理系统，能够集中管理不同应用、不同集群的线程配置，修改配置后能够实时刷新，使用起来，简单易用。 支持JAVA客户端，可在Spring/Spring Boot环境下运行 支持JKD1.8，以及更高版本。 演示 : ...
颠覆你对线程池的认知,多参带返回值,传自定义传任意类型-易语言
线程池可以多参还能带返回值， 使用简单到你不敢相信。传自定义类型功能。传任意参功能。 re ＝ 线程池1.创建 (任务_单参, 回调函数, 待机数, 最大数) '线程工作完。返回结果到回调函数线程池 工作线程返回值将返回...
Android异步更新UI-线程池-Future-Handler实例分析
Demo－实例讲解线程池里面的ＵＩ如何刷新，处理两个开发者头疼的问题： 1. 数据经常需要读取更新,并且比较耗时,需要分步刷新UI. 2. UI界面切换后,如何停止掉子线程里面正在读取的数据而不会将旧数据刷新到新UI界面上...
C++ 语言

64,637

社区成员

250,559

社区内容

发帖
与我相关
我的任务
社区描述
C++ 语言相关问题讨论，技术干货分享，前沿动态等
c++ 技术论坛（原bbs）
社区管理员
  • C++ 语言社区
  • encoderlee
  • paschen
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
  1. 请不要发布与C++技术无关的贴子
  2. 请不要发布与技术无关的招聘、广告的帖子
  3. 请尽可能的描述清楚你的问题，如果涉及到代码请尽可能的格式化一下

试试用AI创作助手写篇文章吧

+ 用AI写文章