社区
基础编程
帖子详情
php大数据量问题,请教
Cesc
2015-05-27 09:46:48
在网站上用户要下载历史记录,有几百万条记录,一旦用户选择全部条件搜索后下载,数据库和服务器就好像挂掉了,请问有哪些方法可以解决这类问题?
...全文
187
3
打赏
收藏
php大数据量问题,请教
在网站上用户要下载历史记录,有几百万条记录,一旦用户选择全部条件搜索后下载,数据库和服务器就好像挂掉了,请问有哪些方法可以解决这类问题?
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
xuzuning
2015-05-29
打赏
举报
回复
这取决于你打算将什么样格式的数据给用户 如果是在查询后逐条组装,显然是很慢的 如果格式比较简单,可用 INTO OUTFILE 子句直接将查询结果保存于文件。再将该文件的连接发给用户 INTO OUTFILE 子句默认产生的文件是以 Tab 做字段分隔符(很普通的 csv 格式),当然你还可以指定 INTO OUTFILE 产生的文件,可以用 LOAD DATA INFILE 指令导回表中。 不失为一种数据备份的方法
Suckor
2015-05-29
打赏
举报
回复
数据库做个主从,这种查询就直接走从数据库好了,如果实时性 不强的话,也可以考虑在空闲时段打包好(可以增量打包如果用户可接受的话)提供给用户下载, 最重要的一点 优化你下载的程序。
夏之冰雪
2015-05-27
打赏
举报
回复
php打包,分割成几个文件,最后zip下载。 点击下载后,异步处理,后台启动一个php进程处理,避免服务器受到影响。
php
接口返回大
量
数据,API如何及时输出大
量
数据JSON数据
在做一API,APP端想抽取简要数据进行缓存在手机...但是这样又增加了连接次数,也不是很理想,决定还是用一次获取完的方案,所以想
请教
一下如何优化一下输出的这个数据,例如标题里提到的及时输出,但是之前没有弄过我...
mysql数据
量
大断开_mysql update数据过大,连接断开
有一个2万条的数据源,现在逐条输出 update 另外一个数据表(远程API)的值,由于数据
量
过大,经常被远程服务器断开或本网页显示 500内部错误,
请教
一下大师,有什么办法可以优化一下,是否可以分批次更新,请求给一个...
php
统计数据加载慢,实时变化(每天)的数据来自大
量
数据的查询,导致加载需要很长时间...
实时变化(每天)的数据来自大
量
数据的查询,导致加载需要很长时间,
请教
一下应该如何优化比如说用户表里有一个用户A 他邀请了很多会员A1,A2,A3..............An ,会员A1 又邀请了很多会员 A11,A12,A13.........A1...
php
文件大影响运行速度吗,
请教
关于
php
运行速度与文件大小的
问题
请教
关于
php
运行速度与文件大小的
问题
关注:197答案:4手机版解决时间 2021-01-31 14:25提问者北墓南笙2021-01-30 14:14我有个
php
执行文件,里面有个变
量
(字符串)很长,长到这个字符串大概是30000个字节,我开始是把这...
MySQL随机获取数据的方法,支持
大数据
量
因为本人对
大数据
量
方面的只是了解的很少,无解,去找百度老师。。搜索结果千篇一律。特发到这里来,供大家学习。 在mysql中带了随机取数据的函数,在mysql中我们会有rand()函数,很多朋友都会直接使用,如果几百...
基础编程
21,893
社区成员
140,347
社区内容
发帖
与我相关
我的任务
基础编程
从PHP安装配置,PHP入门,PHP基础到PHP应用
复制链接
扫一扫
分享
社区描述
从PHP安装配置,PHP入门,PHP基础到PHP应用
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章