社区
Sybase
帖子详情
大数据量数据入库问题,在线等待!!!!!
qyluo
2006-11-25 10:00:40
小弟现在有个项目,数据库是sybase12.5,需要每分钟入库2万条数据/单表,
使用java语言,我现在只能做到每分钟入库8000条左右。
差距很大,希望各位老大帮忙解决哦!!!!!!!!!!!!!
...全文
360
4
打赏
收藏
大数据量数据入库问题,在线等待!!!!!
小弟现在有个项目,数据库是sybase12.5,需要每分钟入库2万条数据/单表, 使用java语言,我现在只能做到每分钟入库8000条左右。 差距很大,希望各位老大帮忙解决哦!!!!!!!!!!!!!
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
sybasedba
2006-12-04
打赏
举报
回复
1、用快速bcp的方式来检查你当前的硬件配置能不能达到你的指标(快速bcp的意思是在表上不要有任何的主键/索引),如果bcp都不行,那就不要想程序能达到这个目标了。
2、如果bcp没有问题,可以达到,那就看看能不能用并行方式来提高速度,blkcpy api好像没有直接的Java接口,要使用jni,不见的有多高的效率。
gxdq
2006-11-30
打赏
举报
回复
使用BCP即可,另把目标表去掉索引和主键
qyluo
2006-11-27
打赏
举报
回复
能详细说说吗,我在网上没找到相关资料啊!!!
hobbylu
2006-11-26
打赏
举报
回复
考虑使用blkcpy api
java十万
数据
秒级
入库
_关于百万级大批
量
数据
入库
的选择
日常中某些需求,经常会遇到一些大批
量
数据
写入的
问题
,从原始那种 foreach 循环单笔写入
数据
早已过时,不能满足
入库
的实效性,直接忽视,.一般情况下的 orm映射是支持批
量
写入
数据
的,效率也是忽高忽低,受各种因素...
大
数据
量
接口的异步处理方案详解
在现代分布式系统中,处理
大
数据
量
的接口是一个常见但复杂的场景。本文将详细分析
大
数据
量
接口异步处理的常见方案,并结合实际应用场景进行优缺点对比。
大
数据
量
接口的异步处理是现代系统设计中的一个重要部分。不同...
mysql调优-
大
数据
量
分页
mysql调优-
大
数据
量
分页 文章目录mysql调优-
大
数据
量
分页mysql分页一般用法使用 limit ? offset ? 进行分页的原理一、pandas是什么?二、使用步骤1.引
入库
2.读入
数据
总结 mysql分页一般用法 SELECT * FROM art_...
利用MySQL
数据
库如何解决
大
数据
量
存储
问题
?
各位高手您们好,我最近接手公司里一个比较棘手的
问题
,关于如何利用MySQL存储
大
数据
量
的
问题
,主要是
数据
库中的两张历史
数据
表,一张模拟
量
历史
数据
和一张开关
量
历史
数据
表,这两张表字段设计的很简单(OrderNo,...
玩转
数据
采集:PC端爬虫工程师如何高效完成
数据
入库
?
数据
入库
是指将采集好的
数据
存储到
数据
库中以便后续处理和分析。作为一名PC端爬虫工程师,掌握
数据
入库
技能是必不可少的。在进行
数据
采集的同时,将
数据
实时地存储到
数据
库中,可以让
数据
得到更好地管理和利用,提高...
Sybase
2,598
社区成员
25,609
社区内容
发帖
与我相关
我的任务
Sybase
Sybase相关技术讨论区
复制链接
扫一扫
分享
社区描述
Sybase相关技术讨论区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章