社区
Java EE
帖子详情
[求助] 求千万数据量表的抽取方案
AndsionLee
2013-06-06 04:28:25
问题:B库C表数据抽到A库C表,C表结构相同,数据量接近5千万,类似如此的操作有20+张表。
1.安全起见,不允许试用DBLINK.
2.之前通过WebService实现,效率太低。
3.目前考虑B端查询数据生成CSV文件,zip压缩,调用A端接口修改A端状态表“准备状态”及“zip的URL”。A端扫描后下载ZIP,解压、解析入库。
请问有更好的方法吗?最好能提供资料(java)。谢谢! 邮箱:andsion@foxmail.com
...全文
100
3
打赏
收藏
[求助] 求千万数据量表的抽取方案
问题:B库C表数据抽到A库C表,C表结构相同,数据量接近5千万,类似如此的操作有20+张表。 1.安全起见,不允许试用DBLINK. 2.之前通过WebService实现,效率太低。 3.目前考虑B端查询数据生成CSV文件,zip压缩,调用A端接口修改A端状态表“准备状态”及“zip的URL”。A端扫描后下载ZIP,解压、解析入库。 请问有更好的方法吗?最好能提供资料(java)。谢谢! 邮箱:andsion@foxmail.com
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
女雅乱
2013-06-07
打赏
举报
回复
不可以导入导出么?
AndsionLee
2013-06-06
打赏
举报
回复
不好意思,补充一下! 数据库:oracle10g
loveofmylife
2013-06-06
打赏
举报
回复
应该是oracle吧,你的第三条可以改成import出来dump文件,不用csv,如果非用这种平面文件的话,改用ldr去做速度能快些 另外压缩平面文件可以考虑其他的压缩算法
文章:深度学习技术驱动青少年心理健康服务(Utilizing Deep Learning Technology to Propel Adolescent Mental Health Services)
目的:为解决当前青少年心理健康服务供需失衡和质量良莠不齐等问题,研究应用深度学习技术...结果:经过对随机
抽取
的100例
数据
进行测试,表明该模型能够更好地理解和处理心理咨询问题,完成部分筛查、咨询和科普工作。
[渝粤教育] 南京邮电大学 市场调查与研究 参考 资料
A、正确 B、错误 参考资料【 】 15、【判断题】企业决策者在遇到决策困难的时候就应该
求
助
于市场调研。 A、正确 B、错误 参考资料【 】 16、【判断题】市场营销组合属于市场营销系统中的输出模块。 A、正确 B、错误...
LLM的幻觉问题最新综述
在利用人类反馈的各种方法中,RLHF脱颖而出,成为一种通过强化学习来符合人类偏好的研究解决
方案
。通常,RLHF采用了一个偏好模型,该模型经过训练可以在给定提示和人工标记的反应情况下预测偏好排名。为了与人类偏好...
编程新手导论(转载)
是编程入门的关键(要懂得一点领域内的数学)《数学与算法》(编程与数学)计算机整个就是架构在数学上的,跟计算机平台实现,算法设计,,架构密切相关,,真正要深入编程,,,对数学的学习是必须的,,
千万
不
编程新手导论
(要懂得一点领域内的数学)《数学与算法》(编程与数学)计算机整个就是架构在数学上的,跟计算机平台实现,算法设计,,架构密切相关,,真正要深入编程,,,对数学的学习是必须的,,
千万
不要相信别人编程不需学...
Java EE
67,512
社区成员
225,880
社区内容
发帖
与我相关
我的任务
Java EE
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
复制链接
扫一扫
分享
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章