数据量大超时的问题

aton 2008-08-21 09:09:02

数据库大概有30万条数据，需要全部生成静态页面。
php程序每次大概生成3000条数据就超时，有什么好的办法解决？

...全文

180 9 打赏收藏转发到动态举报

写回复

9 条回复

切换为时间正序

请发表友善的回复…

发表回复

justicesun 2008-08-22

打赏
举报

回复

批处理也行

ten789 2008-08-22

打赏
举报

回复

把运行时间设置到长点或者干脆永远不超时

aton 2008-08-22

打赏
举报

回复

up

yunfeifan 2008-08-22

打赏
举报

回复

数据库做优化了吗，你的超时是超了多长时间，做查询索引了吗？

北里闻箫 2008-08-22

打赏
举报

回复

每次只执行1000条。limit 1000

在执行文件的开头加上个cookie或者session，用来记录执行到多少条了。limit $_COOKIE['$m']=xxx,$_COOKIE['$n']=xxx+1000,

在执行文件结束时，加一个倒计时调用自身。比如等待1秒或者等待2秒。这个就随便写了。

feng8008 2008-08-22

打赏
举报

回复

分段

xiongbing529 2008-08-22

打赏
举报

回复

set_time_limit(0)

system_009 2008-08-21

打赏
举报

回复

ip

system_007 2008-08-21

打赏
举报

回复

up

本文实例分析了PHP进行批量任务处理不超时的解决方法。分享给大家供大家参考，具体如下：PHP批量任务处理PHP在批量处理任务的时候会超时,其实解决方法很简单了,就是把任务分割,一次处理一部分,任务进度可以放在服务端也可以放在客户端,不是很复杂的话放在客户端,用js来处理就可以了.客户端js回调处理客户端处理的时候需要住一个地方,就是使用ajax处理的时候,ajax是异步的,使用for循环来处理的时...

** php关于数据量大导出数据或者遍历数据导致内存溢出超时等问题 ** 话不多说直接上代码 $p = 0;$pageSize=100; // 定义每页显示条数 set_time_limit(0);//这是个神仙函数很赞，其主要作用是 :设置脚本最大的执行时间，单位为秒。如果设置为0（零），没有时间方面的限制。 while ( $list = db('user')->order('a.id desc')->limit($p*$pageSize, $pageSize)

首先声明，为实际项目中用到技术，绝非水文，手打不易，禁止抄袭！！！！！！项目背景，做的是银行项目，ods实时查询接口，java开发接口，数据库为Oracle 19c。最近生产运维反馈，手机银行查询个人交易流水信息，首次查询时，总报错 “查询超时”。经手机银行分析后，是由于 ods返回数据超时。运维中心，要求ods排查处理该问题。当邮件发送到我这时，头大的很，因为这个问题，以我目前的水平，真的是毫无办法的，因为他涉及到的不仅仅是我改两行代码、优化下查询sql就能解决的了的，废话不多说，说下分析的过程。

一、背景开发过程中或多或少会遇到某些场景，要求数据在规定的时间内如果没处理就要失效掉；如：用户下单，订单在30分钟内没支付就要自动取消，防止长时间占用库存等；面对这种情况我们来扒拉一下：系统启一个定时任务，定时扫库，取出超过30分钟的数据，取消释放库存用户下单后将订单放入MQ的延迟队列（比如RocketMQ的延迟消息），依赖于MQ的通知实时触发取消将数据放入Redis，定时扫描Redis 将数据放入收尾相连的环形链路中，依次触发超时二、实现思路 1、定时任务扫库在分布式定时

有些循环数据量大的表，接口会出错，在方法的里面加上这个。

21,893

社区成员

140,347

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章