大数据量入库,每分钟1W条,算快的吗?

全能码农-ss 2013-07-31 07:43:11
想问下多线程,大数据量入库,每分钟多少条算快的?

我现在1个线程读,10个线程,或者20个线程,30个线程入库,都是每分钟大概1W条,

请问算快的吗?
...全文
1112 31 打赏 收藏 转发到动态 举报
写回复
用AI写文章
31 条回复
切换为时间正序
请发表友善的回复…
发表回复
全能码农-ss 2013-08-15
  • 打赏
  • 举报
回复
感谢#3 #16
全能码农-ss 2013-08-15
  • 打赏
  • 举报
回复
找到原因了,是因为自动提交的问题,改成手工提交就块了,5分钟100W,谢谢各位
owen1759 2013-08-08
  • 打赏
  • 举报
回复
数据来源是什么?如果也是数据库的话可以考虑数据泵
全能码农-ss 2013-08-06
  • 打赏
  • 举报
回复
引用 23 楼 shiyuyao1987 的回复:
使用这个SqlBulkCopy
学习了
全能码农-ss 2013-08-06
  • 打赏
  • 举报
回复
引用 24 楼 u011405885 的回复:
公司开发人员中没有专门的数据库开发人员吗?写JAVA的人都要精通数据库吗?
要啊,我在琢磨琢磨
全能码农-ss 2013-08-06
  • 打赏
  • 举报
回复
引用 25 楼 cpio 的回复:
我自己的笔记本,每秒钟都可以几千条,按分钟算的话,每分钟至少也得几十万条了吧?
说的对
shiyuyao1987 2013-08-02
  • 打赏
  • 举报
回复
使用这个SqlBulkCopy
xuan.ye 2013-08-02
  • 打赏
  • 举报
回复
有业务和没有业务处理,是有区别的,不能一概而论是快还是慢
rihaduo202 2013-08-02
  • 打赏
  • 举报
回复
数据库本身也有并发限制的,可以查查看看。
可乐罐 2013-08-02
  • 打赏
  • 举报
回复
还以为我看错了,每分钟。。。。。 啥子数据库?这么龟速?
山城忙碌人 2013-08-02
  • 打赏
  • 举报
回复
添加数据的时候把表索引删除试试!数据增加完成后再加上索引!
cpio 2013-08-02
  • 打赏
  • 举报
回复
我自己的笔记本,每秒钟都可以几千条,按分钟算的话,每分钟至少也得几十万条了吧?
pleasanton 2013-08-02
  • 打赏
  • 举报
回复
公司开发人员中没有专门的数据库开发人员吗?写JAVA的人都要精通数据库吗?
无聊找乐 2013-08-01
  • 打赏
  • 举报
回复
引用 5 楼 jinsong1213 的回复:
回复3楼,现在是每个县城一次批量插入1000条,自动提交。有10个插入线程是1分钟1W,20个线程还是1分钟1W。费解啊,不知瓶颈在哪里。c3p0的连接池也改过了,难道是mysql的并发限制???
瓶颈在数据库啊,你客户端开再多的线程有毛用啊
朗晴 2013-08-01
  • 打赏
  • 举报
回复
您这贴子应该发到数据库中去。
全能码农-ss 2013-08-01
  • 打赏
  • 举报
回复
回复3楼,现在是每个县城一次批量插入1000条,自动提交。有10个插入线程是1分钟1W,20个线程还是1分钟1W。费解啊,不知瓶颈在哪里。c3p0的连接池也改过了,难道是mysql的并发限制???
全能码农-ss 2013-08-01
  • 打赏
  • 举报
回复
回复2楼:没多大,大概有12个字段,每个字段都是10个字符以内的字符串
TheoneFx 2013-08-01
  • 打赏
  • 举报
回复
先搞清楚性能瓶颈在哪,在考虑优化的方法。
tf452658805 2013-08-01
  • 打赏
  • 举报
回复
woyaofeiqilai 2013-08-01
  • 打赏
  • 举报
回复
加载更多回复(11)

67,516

社区成员

发帖
与我相关
我的任务
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
社区管理员
  • Java EE
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧