每秒钟写入10万条记录，能做到不？-CSDN论坛

每秒钟写入10万条记录，能做到不？

其他数据库开发 > MySQL

收藏回复

[问题点数：40分]

⋅祝CSDNer新年好！ ⋅祝大家新年快乐！ ⋅每秒钟写入10万条记录，能做到不？ 更多帖子 关注私信空间博客 bugs2k 本版专家分：0 结帖率 80% 红花 2014年7月其他开发语言大版内专家分月排行榜第一 2013年3月其他开发语言大版内专家分月排行榜第一 2013年2月其他开发语言大版内专家分月排行榜第一 2013年1月其他开发语言大版内专家分月排行榜第一 2012年10月其他开发语言大版内专家分月排行榜第一 2012年9月其他开发语言大版内专家分月排行榜第一 2012年8月其他开发语言大版内专家分月排行榜第一 2012年7月其他开发语言大版内专家分月排行榜第一 2012年6月其他开发语言大版内专家分月排行榜第一 2012年5月其他开发语言大版内专家分月排行榜第一: 最近领导有点发疯，要求我们必须做到满足每秒写入10万条记录，每条记录大概 1k 字节左右。
请问各位大牛，哪种数据库系统可以满足要求？采用何种架构？
非常感谢您的回复！

2012-08-02 09:45:37

点赞 0 只看楼主引用举报楼主

⋅升星！你懂的！

⋅vb反编译exe工具,搜索半天编译后都不能用

⋅生星散分！

更多帖子

关注私信空间博客

Rotel

本版专家分：14366

签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！

脉脉勋章 绑定脉脉第三方账户获得: mysql、oracle、sqlserver都可以满足需求。关键在于架构是怎样的。

2012-08-02 10:03:03

点赞 0 只看TA 引用举报 #1得分 0

⋅祝CSDNer新年好！ ⋅祝大家新年快乐！ ⋅每秒钟写入10万条记录，能做到不？ 更多帖子 关注私信空间博客 bugs2k 本版专家分：0 红花 2014年7月其他开发语言大版内专家分月排行榜第一 2013年3月其他开发语言大版内专家分月排行榜第一 2013年2月其他开发语言大版内专家分月排行榜第一 2013年1月其他开发语言大版内专家分月排行榜第一 2012年10月其他开发语言大版内专家分月排行榜第一 2012年9月其他开发语言大版内专家分月排行榜第一 2012年8月其他开发语言大版内专家分月排行榜第一 2012年7月其他开发语言大版内专家分月排行榜第一 2012年6月其他开发语言大版内专家分月排行榜第一 2012年5月其他开发语言大版内专家分月排行榜第一: 请问：该如何架构？单台pc服务器应该满足不了吧？

2012-08-02 10:07:14

点赞 0 只看TA 引用举报 #2得分 0

⋅如何优化INSQL ⋅python 多线程的问题 ⋅慢查询日志里只有一个commit 更多帖子 关注私信空间博客 珠海-天堂 本版专家分：2272: 算一算
100000*1K=100M

普通的PC服务器单磁盘（7200转）的写入（顺序写入）速度一般为100M/S，刚好满足你的要求，但是刨掉其他操作的消耗，就不够100M/S单独给你的程序写入了。

2块硬盘做RAID0，相当于两块硬盘同时写，能达到180M-200M，满足你的要求了。

2012-08-02 10:23:41

点赞 0 只看TA 引用举报 #3得分 0

⋅祝CSDNer新年好！ ⋅祝大家新年快乐！ ⋅每秒钟写入10万条记录，能做到不？ 更多帖子 关注私信空间博客 bugs2k 本版专家分：0 红花 2014年7月其他开发语言大版内专家分月排行榜第一 2013年3月其他开发语言大版内专家分月排行榜第一 2013年2月其他开发语言大版内专家分月排行榜第一 2013年1月其他开发语言大版内专家分月排行榜第一 2012年10月其他开发语言大版内专家分月排行榜第一 2012年9月其他开发语言大版内专家分月排行榜第一 2012年8月其他开发语言大版内专家分月排行榜第一 2012年7月其他开发语言大版内专家分月排行榜第一 2012年6月其他开发语言大版内专家分月排行榜第一 2012年5月其他开发语言大版内专家分月排行榜第一: 数据库该如何处理才能每秒写入10万条记录，每小时3.6亿条记录，每天16小时写入57.6亿条记录？
磁盘阵列如何架构？

2012-08-02 10:35:26

点赞 0 只看TA 引用举报 #4得分 0

⋅如何优化INSQL ⋅python 多线程的问题 ⋅慢查询日志里只有一个commit 更多帖子 关注私信空间博客 珠海-天堂 本版专家分：2272: 每秒写入100M，一小时3600*100=360G，一天360*24=8640G=8.6T，一个月8.6*30=250T，一年250*12=3000T。很威武！

我没处理过这么大的数据量，静坐等高手。

2012-08-02 10:42:02

点赞 0 只看TA 引用举报 #5得分 0

⋅mongodb4.0将支持事务 ⋅csdn越来越恶心了，不仅每个帖子挂超链接，一楼回复直接是推荐链接 ⋅为什么每个帖子的回复都自动加个超链接？？想流量想疯了吧 更多帖子 关注私信空间博客 rucypli 本版专家分：106068 红花 2017年6月其他数据库开发大版内专家分月排行榜第一 2017年2月其他数据库开发大版内专家分月排行榜第一 2013年11月其他数据库开发大版内专家分月排行榜第一 2013年9月其他数据库开发大版内专家分月排行榜第一 2013年2月其他数据库开发大版内专家分月排行榜第一 黄花 2018年2月其他数据库开发大版内专家分月排行榜第二 2018年1月其他数据库开发大版内专家分月排行榜第二 2017年12月其他数据库开发大版内专家分月排行榜第二 2017年11月其他数据库开发大版内专家分月排行榜第二 2017年1月其他数据库开发大版内专家分月排行榜第二 2014年8月其他数据库开发大版内专家分月排行榜第二 2014年2月其他数据库开发大版内专家分月排行榜第二 2014年1月其他数据库开发大版内专家分月排行榜第二 2013年12月其他数据库开发大版内专家分月排行榜第二 2013年10月其他数据库开发大版内专家分月排行榜第二 2013年8月其他数据库开发大版内专家分月排行榜第二 2013年5月其他数据库开发大版内专家分月排行榜第二 2013年1月其他数据库开发大版内专家分月排行榜第二 2012年8月其他数据库开发大版内专家分月排行榜第二 2012年5月其他数据库开发大版内专家分月排行榜第二 2012年4月其他数据库开发大版内专家分月排行榜第二 2012年1月其他数据库开发大版内专家分月排行榜第二 蓝花 2017年9月其他数据库开发大版内专家分月排行榜第三 2017年7月其他数据库开发大版内专家分月排行榜第三 2017年5月其他数据库开发大版内专家分月排行榜第三 2017年3月其他数据库开发大版内专家分月排行榜第三 2016年12月其他数据库开发大版内专家分月排行榜第三 2014年11月其他数据库开发大版内专家分月排行榜第三 2014年7月其他数据库开发大版内专家分月排行榜第三 2014年6月其他数据库开发大版内专家分月排行榜第三 2014年5月其他数据库开发大版内专家分月排行榜第三 2013年7月其他数据库开发大版内专家分月排行榜第三 2013年3月其他数据库开发大版内专家分月排行榜第三 2012年7月其他数据库开发大版内专家分月排行榜第三 2012年6月其他数据库开发大版内专家分月排行榜第三 2011年12月其他数据库开发大版内专家分月排行榜第三: 最简单的是用nosql数据库 ttserver mongogdb redis都可以

用关系型数据库的话可能已经到极限了 load会非常高当然如果你用ssd除外

2012-08-02 10:44:57

点赞 0 只看TA 引用举报 #6得分 0

⋅祝CSDNer新年好！ ⋅祝大家新年快乐！ ⋅每秒钟写入10万条记录，能做到不？ 更多帖子 关注私信空间博客 bugs2k 本版专家分：0 红花 2014年7月其他开发语言大版内专家分月排行榜第一 2013年3月其他开发语言大版内专家分月排行榜第一 2013年2月其他开发语言大版内专家分月排行榜第一 2013年1月其他开发语言大版内专家分月排行榜第一 2012年10月其他开发语言大版内专家分月排行榜第一 2012年9月其他开发语言大版内专家分月排行榜第一 2012年8月其他开发语言大版内专家分月排行榜第一 2012年7月其他开发语言大版内专家分月排行榜第一 2012年6月其他开发语言大版内专家分月排行榜第一 2012年5月其他开发语言大版内专家分月排行榜第一: NoSQL 支持查询、统计之类的不？

2012-08-02 10:46:34

点赞 0 只看TA 引用举报 #7得分 0

⋅spring mvc中的controller中的javabean的属性值为什么不能赋值 ⋅jd eclipse反编译只能反编译jar包的第一个类，其他类的内容与第一个类内容一样 ⋅关于javascript中的日期比较 更多帖子 关注私信空间博客 白天的猫头鹰 本版专家分：126: 使用nosql，reddis，mongodb

2012-08-02 13:45:10

点赞 0 只看TA 引用举报 #8得分 0

⋅国内大家感觉程序员中有百分之多少不知道CSDN的？ ⋅无法看到某些私信 ⋅无法看到某些私信 更多帖子 关注私信空间博客 ACMAIN_CHM 本版专家分：472926 名人 2012年荣获名人称号 榜眼 2010年总版技术专家分年内排行榜第二 探花 2009年总版技术专家分年内排行榜第三 进士 2013年总版技术专家分年内排行榜第十 2011年总版技术专家分年内排行榜第七: MYSQL估计比较难。

2012-08-02 13:55:39

点赞 0 只看TA 引用举报 #9得分 0

⋅你们的工作电脑有监控吗？ ⋅加油馒头的留言板 ⋅程序人生已经被阉割了？ 更多帖子 关注私信空间博客 加油馒头 本版专家分：525: 个人觉得比较难。。。
用批处理方式插入

2012-08-02 14:41:19

点赞 0 只看TA 引用举报 #10得分 0

1 2 3 4

收藏回复

bugs2k

等级：

: 红花 2014年7月其他开发语言大版内专家分月排行榜第一
2013年3月其他开发语言大版内专家分月排行榜第一
2013年2月其他开发语言大版内专家分月排行榜第一
2013年1月其他开发语言大版内专家分月排行榜第一
2012年10月其他开发语言大版内专家分月排行榜第一
2012年9月其他开发语言大版内专家分月排行榜第一
2012年8月其他开发语言大版内专家分月排行榜第一
2012年7月其他开发语言大版内专家分月排行榜第一
2012年6月其他开发语言大版内专家分月排行榜第一
2012年5月其他开发语言大版内专家分月排行榜第一

关注私信 TA的帖子

我要发贴

logback日志记录写入kafka: 使用slf4j配置kafkaAppender写入日志到kafka列队支持日志解析+过滤等扩展接口

图片尾部写入图片记录信息: 在图片的尾部写入信息，不影响图片的像素信息，同时隐藏图片的一些记录信息

log4j使用与java中log4j记录日志如何写入数据库: 详细介绍了log4j的使用方法，介绍了java中日志记录如何写入数据库，对于初学者来说很不错的一个文档

grldr主引导记录（mbr）写入工具: 这是DOS下的grldr.mbr写入工具，使用很方便。

NLog记录日志、发邮件、写入数据库: NLog记录日志文件、发邮件、写入数据库

C# 读取一个文件夹中多个txt,去重正则化后重新写入，要求每个不能超过二十万行: 本程序主要采用C#，完成一个文件夹中的多个txt读取，本人的测试时，读取的是多个手机号码，每一个号码占一行，对多个文档中的手机号码进行正则化，并去重复处理，重新写入多个txt,中，每个txt要求不超过二十万行。

100万条数据导入SQL数据库仅用4秒: 100万条数据导入SQL数据库仅用4秒，100万条数据导入SQL数据库仅用4秒

labview 对每一个单元格写入输入: 利用labview对每一个指定的单元格写入元素

Etcher 镜像写入工具: Proxmox官方推荐的镜像写入工具，可以把Proxmox VE镜像写入启动U盘

android的U盘能写入的方法: 现在U盘不能基本写入,有代码写adb shell命名,使得U盘具有写入功能

python 写入TXT文件但不覆盖原有内容: 前一篇write_txt文件写入后会覆盖原来文件内容，变换参数后，可保留原文件内容，在文件最后增加新写入的内容！

Java写入大数据文件: 使用Java写入大数据文件的方法，分文件写入。

WINIMAGE（专用于大于2g硬盘不识别的写入工具）: WINIMAGE（专用于大于2g硬盘不识别的写入工具）

U盘镜像写入工具: U盘镜像写入工具

禁止U盘上写入文件的批处理: 禁止U盘上写入文件的批处理,windows域管理使用,

labview 写入电子表格: labview 写入电子表格，实列88888888888888888888888888888

java读取写入txt文件: java利用io技术创建文件夹、读取txt文件、写入txt文件（覆盖、不覆盖均有）

写入磁盘小工具(将bin写入到img磁盘): 将bin写入到img磁盘，c++的f***系列函数写的，将512字节写入.img软盘或硬盘

C# 使用 StreamWriter 写入数据: C# 使用 StreamWriter 写入数据 C# 使用 StreamWriter 写入数据 C# 使用 StreamWriter 写入数据 C# 使用 StreamWriter 写入数据 C# 使用 StreamWriter 写入数据 C# 使用 StreamWriter 写入数据

Usbit写入DMG镜像: 写入DMG镜像，用于制作USB MAC启动安装盘

相关热词 c# cad插入影像 c#设计思想 c#正则表达式转换 c#form复制 c#写web c# 柱形图 c# wcf 服务库 c#应用程序管理器 c#数组如何赋值给数组 c#序列化应用目的博客园

我们是很有底线的