如果一条条插入的话，要连接几千次数据库，性能上可能损失比较大。
我初步的想法是能不能缓存一下请求，比方说队列满100个请求，然后生成一个xml，传入数据库过程中，解析插入数据。
不过感觉这样效果也不见得好，有没有更好的处理方法，求教。
-
等级
本版专家分：1384结帖率 95.83% -
例如购物网站中，同时有几千几万个用户一起请求购买，这时候如何能够优化数据插入呢？
如果一条条插入的话，要连接几千次数据库，性能上可能损失比较大。
我初步的想法是能不能缓存一下请求，比方说队列满100个请求，然后生成一个xml，传入数据库过程中，解析插入数据。
不过感觉这样效果也不见得好，有没有更好的处理方法，求教。展开阅读全文
-
等级
本版专家分：65235勋章
-
- 进士 2013年 总版技术专家分年内排行榜第九
-
-
金牌
2013年4月 总版技术专家分月排行榜第一
2013年3月 总版技术专家分月排行榜第一
-
-
红花
2013年4月 .NET技术大版内专家分月排行榜第一
2013年3月 .NET技术大版内专家分月排行榜第一
-
- 蓝花 2013年2月 .NET技术大版内专家分月排行榜第三
-
-
可以用MemCache，按你说的，把请求插入的数据放到MemCache里，满100个就插入到数据库里
-
等级
本版专家分：269 -
这样的话也不好，如果是不忙呢！别人要购物什么时候才能看到单啊，影响了销售效率了
-
等级
本版专家分：58278勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 回归勋章 授予重新回归CSDN的真爱粉用户，我们不会让你失望哒！
-
- 蓝花 2011年11月 .NET技术大版内专家分月排行榜第三
-
-
考虑下使用批处理
-
等级
本版专家分：24870 -
如果用缓存，实时性就不好，如果实时插入，性能就有所影响，这只能在中间找个平衡点啦
-
等级
本版专家分：12526
-
如果正好在订购人少的时候下订单，那岂不是一直下不了，还要等待100人满？
不过可以建立一个XML文件暂缓存储下的订单，XML满100后就插入数据库。
但是这样的话，如果客户刚下订单再去数据库查询等待其他需要使用该数据的时候就不知道要从数据库还是XML文件中获取列表了。
-
等级
本版专家分：1091
-
你想得有点太偏激了。我上次与一家B2C公司的CTO谈话时，说到订单这块，其实压力并不是很大。不可能瞬间有成千上万的负载并发
-
等级
本版专家分：6 -
楼上所言甚是 不可能有那么大的负载并发的
-
等级
本版专家分：233778勋章
-
- 状元 2011年 总版技术专家分年内排行榜第一
-
-
金牌
2011年9月 总版技术专家分月排行榜第一
2011年8月 总版技术专家分月排行榜第一
2011年7月 总版技术专家分月排行榜第一
2011年6月 总版技术专家分月排行榜第一
2011年5月 总版技术专家分月排行榜第一
2011年4月 总版技术专家分月排行榜第一
-
-
银牌
2011年3月 总版技术专家分月排行榜第二
2011年2月 总版技术专家分月排行榜第二
-
-
微软MVP
2012年7月 荣获微软MVP称号
2011年7月 荣获微软MVP称号
-
-
定时更新。不要用满多少更新。。
- 多请求多数据量综合页面优化方案
关于页面优化一直是一个让人头痛的问题，除了修正那些不负责任的代码外，要考虑的因素还有很多。系统优化，我觉得就好比医生治病，你必须准确的找到病因，手起刀落，干净利索。今天就遇到了一个重症患者。 问题...
- redis中执行大量数据插入操作
Redis管道请求/响应协议和RTTRedis是一种基于客户端-服务端模型以及请求/响应协议的TCP服务。 通常情况下一个请求会遵循以下步骤： - 客户端向服务端发送一个查询请求，并监听Socket返回，通常是以阻塞模式，等待...
- 高并发下数据库中如何解决重复插入数据的问题
昨天面试，被面试官问到。。。 比如用户注册时，先要验证用户名是否存在，但是在验证过后可能还会被插入相同用户名的数据，这就造成了冲突。 应该怎么解决？
- Java开发面试：高并发秒杀系统如何设计与优化
如今处在一个大数据时代，应届生找工作面试高级Java开发工程师时，经常会被问一些和大数据相关的问题，比如大数据处理问题、高并发处理问题、数据优化问题等，笔者曾经遇到两个比较经典的问题，高并发秒杀系统的...
- 高并发设计方案二（秒杀架构）
（1）尽量将请求拦截在系统上游（越上游越好）； （2）读多写少的常用多使用缓存（缓存抗读压力）；
- 用Redis轻松实现秒杀系统
对于电商网站中一些稀缺或者特价商品，电商网站一般会在约定时间点对其进行限量销售，因为这些商品的特殊性，会吸引大量用户前来抢购，并且会在约定的时间点同时在秒杀页面进行抢购。 秒杀系统场景特点 秒杀时...
- 一次向数据库插入多条记录
在开发中对于数据的操作经常有可能一次向数据库插入多条记录。 对于才入门的程序员来说，第一感觉就是写个循环，先把sql写好每次循环的时候都传入不同的参数即可。 向用户表中一次插入多个用户。 String[] ...
- 利用redis缓存解决高并发下后端重复请求措施
比如，用户签到，你只想让用户一天签到一次，为了防止签到多次，你对于每次强求，都去查询数据库今天是不是已经签到了，如果签了，就不让继续签到，如果没签到，插入签到数据，更新积分数据什么的。但是数据库操作是...
- 如何设计一个秒杀系统
对于电商网站中一些稀缺或者特价商品，电商网站一般会在约定时间点对其进行限量销售，因为这些商品的特殊性，会吸引大量用户前来抢购，并且会在约定的时间点同时在秒杀页面进行抢购。秒杀系统场景特点 秒杀时大量...
- 针对MyISAM锁表的解决方案（也可应用于表锁定）
最近服务器上经常出现mysql进程占CPU100%的情况，使用show processlist命令后，看到出现了很多状态为LOCKED的sql。使用show status like ‘table%’检查Table_locks_immediate和Table_locks_waited，发现Table_locks...
- 因网络延迟造成数据库插入相同记录，如何解决.
因网络延迟造成相同数据重复插入到数据库中，查询报sqlMap[] result tomany 场景再现：接手了一个项目，注册模块对于不可重复注册功能，使用的是java代码控制，即在注册之前，先查询数据库中用户表有没有存在这个...
- Jmeter使用CSV Data Set Config参数化数据不重复的多次循环执行（实现多用户多次抽奖功能）
今天要测试上千条数据，且每条数据要求执行多次，（模拟多用户多次抽奖） 1.用户id有175个，且没有任何排序规则； 2.要求175个用户都去请求，每个用户执行3次； （由于自己笔记本性能不佳，只能数量小举例，大家...
- Ajax系列面试题总结
1、Ajax是什么?如何创建一个Ajax？ 答案：Ajax 全称是 asychronous javascript and xml，可以说是已有技术的组合，主要用来实现客户端与服务器端的...基本步骤 4 步走：（创建对象、建立连接、发送数据、接收数据...
- 分页请求时，有新数据加入时，下一页会出现重复数据问题
公司业务发展迅速，用户量急剧上升中，偶尔会发现这么一个问题，就是下一页的数据中总会出现上一页的几条数据。具体表现就是 注意4号和5号 第一页和第二页都出现的了这两人 为什么会造成这个问题呢？用户在查询第...
- 分布式技术(8) 摸爬打滚出的高并发架构实战干货
高并发是指在同一个时间点，有很多用户同时访问URL地址，比如：淘宝的双11、双12，就会产生高并发。又如贴吧的爆吧，就是恶意的高并发请求，也就是DDOS攻击，再屌丝点的说法就像玩LOL被ADC暴击了一样，那伤害你懂的...
- 性能优化之道】每秒上万并发下的Spring Cloud参数优化实战
本文为转载文章，作者：中华石杉，十余年BAT架构经验，倾囊相授。作者微信公众号：石杉的架构笔记（ID:shishan100） 一、写在前面 相信不少朋友都在自己公司使用Spring ...如果是较多用户量，高峰每秒高达...
- java电商面试介绍
在青岛做了两年开发，大大小小参与过三个项目的开发，一个是某公司内部的人员管理系统，一个是物流项目，最近做的是一个电商项目。前两个项目采用的是ssh框架搭建的，最近的项目采用的是ssm框架搭建的。...
- 如何解决高并发，秒杀问题 - Redis轻松实现秒杀系统
相信不少人会被这个问题困扰，分享大家一篇这样的文章，希望能够帮到你！ 一、秒杀业务为什么难做？ 1）im系统，例如qq或者微博，每个人都读自己的数据（好友列表、群列表、个人信息）； 2）微博系统，每个人...
- 高并发详解（一）
高并发是指在同一个时间点，有很多用户同时的访问URL地址，比如：淘宝的双11，双12，就会产生高并发,如贴吧的爆吧，就是恶意的高并发请求，也就是DDOS攻击，再屌丝点的说法就像玩撸啊撸被ADC暴击了一样,那伤害你懂得...
- 每秒上万并发下的Spring Cloud性能优化之道
本文为转载文章，作者：中华石杉，十余年BAT架构经验，倾囊相授。作者微信公众号：石杉的架构笔记（ID:shishan100） 一、写在前面 相信不少朋友都在自己公司使用Spring...如果是较多用户量，高峰每秒高达...
- 秒杀系统设计思路笔记
设计原因： 为什么要针对秒杀设计一个完善的方案？因为系统可能会因为1%的秒杀业务影响其余99%正常业务的运行，所以需要将秒杀系统独立出来。 待解决问题： ... 一致性：保证秒杀减库存中的数据一...
- 如何用常规手段优化大数据量网页加载速度
如何用常规手段优化大数据量网页加载速度问题：网页内的大量筛选参数导致页面加载速度缓慢：优化后及示例页面链接解决方案：由后端生成html页面前端通过异步方式获取html格式数据，当页面加载完筛选结果后在呈现给...
- sql优化（查询大数据量时sql执行时间过长）
问题：Oracle数据库 sql查询的优化（成交额统计表的sql查询时间过长进行的优化） 解决办法：对sql语句中使用视图的部分替换为子查询，对查询表条件字段建立索引 引发的问题：在什么情况下建立索引，及建立索引后...
- 阿里P8架构师谈(1)：双11秒杀系统如何设计
淘宝双11秒杀场景，大量的用户短时间内涌入，瞬间流量巨大（高并发），比如：1000万人同一时间抢购100件商品。秒杀活动是一个特别考验后台数据库、缓存服务的业务，对于数据库、缓存的性能要求特别严格。 秒杀背后的...
- 关于数据库层面上锁，解决程序并发插入多条重复数据
在后台判断发现并没有插入的数据，然后啪啪啪一下子插入了2条。也就是在插入前没有判断是否插过了。当时出了这个bug我懵逼了，什么鬼！！后来上网查了一下以及问了主管，这个这个程序端是不好控制并发的(我目前的...
- sqlalchemy插入操作后自动返回自增ID
result = session.execute('insert into ***') session.commit() last_insert_id = result.lastrowid ...注意：如果存在多个用户操作数据库，应保持每个用户或者每个请求线程拥有各自隔离的session...
- 【SpringBoot商城秒杀系统项目总结25】 项目的亮点和难点及问题解决（源码地址）
【商城限时秒杀系统总结】 在高并发情况下的秒杀...1.使用分布式Seesion，可以实现让多台服务器同时可以响应。 2.使用redis做缓存提高访问速度和并发量，减少数据库压力，利用内存标记减少redis的访问。 3.使用页...
- 如何保证HTTP接口请求的安全呢？
那我们要如何对接口请求进行一个安全校验或者拦截非法请求呐？ 1、选择拦截过滤器。 在请求的时候对请求方法进行一次拦截处理。比如非正常访问的方法已经注入插入可执行语句参数验证等在拦截中进行一次安全校验...
- 高并发的解决方案
1.应用和静态资源分离 刚开始的时候应用和静态资源是保存在一起的，当并发量达到一定程度的时候就需要将静态资源保存到专门的服务器中，静态资源主要包括图片、视频、js、css和一些资源文件等，这些文件因为没有状态...
- MySQL中的读锁和写锁
在数据库的锁机制中介绍过，数据的锁主要用来保证数据的一致性的，数据库的锁从锁定的粒度上可以分为表级锁、行级锁和页级锁。在我的博客中重点介绍过MySQL数据库的行级锁。这篇文章主要来介绍一下MySQL数据库中的表...