实时大数据怎么处理？

[iwillfling]

在抢购活动中，用户每分钟产生至少5万多条购买记录数据， 系统每分钟内要把上一分钟内的5万多天数据及时处理掉（改变状态字段）。

如果把记录从数据库读取出来用 for 循环处理。处理速度有点慢。还没处理完，新数据又来了。 该怎么办？

运行环境是centos7.0+ php 7.2 + mysql+ nginx

[天台的故事]

可以在加个redisNoSql

[老虎爱代码]

你这种的话，需要用redis，把产生的数据扔到redis里面，读写效率会好很多，用时间作为score,每分钟的数据使用同一个score,每次你要处理的时候，处理上一分钟score里面的数据！

[xuzuning]

修改状态字段直接用 update 指令，而不是读出来 for 再 update 一分中处理五万条记录，并不是困难的事情 如果你确定瓶颈在数据库读写上，可考虑内存表 memcac 和 redis 都是单线程的第三方服务，无论在运行效率和操作灵活性上都不如内存表

[cjiejie]