社区
高性能WEB开发
帖子详情
实时大数据该怎么处理?
iwillfling
2017-11-29 06:30:25
在抢购活动中,用户每分钟产生至少5万多条购买记录数据, 系统每分钟内要把上一分钟内的5万多天数据及时处理掉(改变状态字段)。
如果把记录从数据库读取出来用 for 循环处理。处理速度有点慢。还没处理完,新数据又来了。 该怎么办?
...全文
315
3
打赏
收藏
实时大数据该怎么处理?
在抢购活动中,用户每分钟产生至少5万多条购买记录数据, 系统每分钟内要把上一分钟内的5万多天数据及时处理掉(改变状态字段)。 如果把记录从数据库读取出来用 for 循环处理。处理速度有点慢。还没处理完,新数据又来了。 该怎么办?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
super就是我
2017-11-29
打赏
举报
回复
你得先把数据库的商品列表那些数据移植到redis缓存中,用户操作的时候先改缓存中的数据,当库存数为0时或活动期结束时,再把数据同步到数据库
super就是我
2017-11-29
打赏
举报
回复
抢购技术实现核心思想是运用缓存减少数据库瞬间的访问压力!读取商品详细信息时运用缓存,当用户点击抢购时减少缓存中的库存数量,当库存数为0时或活动期结束时,同步到数据库。 产生的秒杀预订单也不会立刻写到数据库中,而是先写到缓存,当用户付款成功后再写入数据库。
iwillfling
2017-11-29
打赏
举报
回复
用的是PHP语言。
廖晓格:让
大数据
更
实时
和可视化
该文档来自于携程资深软件工程师廖晓格,在2014中国
大数据
技术大会
大数据
技术分论坛的演讲“让
大数据
更
实时
和可视化”。
1211
大数据
基础设施分论坛
2015 BDTC大会讲师公开PPT-
大数据
基础设施分论坛
1211工业与制造业
大数据
分论坛
2015 BDTC大会讲师公开PPT-工业与制造业
大数据
分论坛
1212交通与旅游
大数据
分论坛
2015 BDTC大会讲师公开PPT-交通与旅游
大数据
分论坛
高光荣:
大数据
系统核心技术
该文档来自于University of Delaware电子与计算机工程系教授,计算机系统结构和并行系统实验室创始人暨主任高光荣在2014中国
大数据
技术大会主会的演讲“
大数据
系统核心技术 ”。
高性能WEB开发
25,980
社区成员
4,366
社区内容
发帖
与我相关
我的任务
高性能WEB开发
高性能WEB开发
复制链接
扫一扫
分享
社区描述
高性能WEB开发
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章