Matlab的大数据量处理

冠希哥谈程序 初级软件工程师  2017-12-01 10:45:28
Matlab可以处理几亿条的数据的(每条数据有32自变量)的多元线性回归运算吗?根据提取的共同因子,得出相应的多元线性回归模型吗?
...全文
1128 3 点赞 打赏 收藏 举报
写回复
3 条回复
切换为时间正序
当前发帖距今超过3年,不再开放新的回复
发表回复
赵4老师 2017-12-01
无profiler不要谈效率!!尤其在这个云计算、虚拟机、模拟器、CUDA、多核 、多级cache、指令流水线、多种存储介质、……满天飞的时代!
  • 打赏
  • 举报
回复
主要是担心运行的效率太低了!上亿条数据的处理多元线性回归运算以及矩阵运算(毕竟变量太多了)等,不知道matlab处理怎么样!
  • 打赏
  • 举报
回复
赵4老师 2017-12-01
容量大小从小到大:栈≤全局数据≤堆≤文件≤硬盘≤磁盘阵列≤云存储 当程序需要使用比如2GB~1TB左右的存储时,最简单的办法恐怕得是用文件读写模拟内存读写了吧。windows参考_fseeki64函数,linux参考fseeko64函数。
FILE *fA;fA=fopen("A","rb+");_fseeki64(fA,10000000000i64*sizeof(int),SEEK_SET);fputc(fA,0);//int A[10000000000];
int B;
_fseeki64(fA,9999999999i64*sizeof(int),SEEK_SET);fread(&B,1,sizeof(int),fA);//B=A[9999999999];
_fseeki64(fA,9999999999i64*sizeof(int),SEEK_SET);fwrite(&B,1,sizeof(int),fA);//A[9999999999]=B;
fclose(fA);
  • 打赏
  • 举报
回复
相关推荐
发帖
非技术区
加入

1.5w+

社区成员

C/C++ 非技术区
申请成为版主
帖子事件
创建了帖子
2017-12-01 10:45
社区公告
暂无公告