社区
Oracle 高级技术
帖子详情
数据汇总迁移
weixin_42715004
2019-03-18 11:22:28
从大概70张oracle 表中,抽出号码字段,关联id插入新表,最后迁入hive库,70张表的数据超百亿条,全部去重后的大概在15亿左右,求方案,存储过程慢慢抽,太恶心,且开始数据量太大,有么有简单可行的方法?
...全文
104
2
打赏
收藏
数据汇总迁移
从大概70张oracle 表中,抽出号码字段,关联id插入新表,最后迁入hive库,70张表的数据超百亿条,全部去重后的大概在15亿左右,求方案,存储过程慢慢抽,太恶心,且开始数据量太大,有么有简单可行的方法?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
2 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
卖水果的net
2019-03-18
打赏
举报
回复
datax 试试,速度还可以的。
Mricoo_周
2019-03-18
打赏
举报
回复
引用 1 楼 卖水果的net 的回复:
datax 试试,速度还可以的。
datax跟kettle都有啥优缺点可以讲下不
数据
迁移
说明 oracle
数据
迁移
完整手册
oracle
数据
迁移
技术
汇总
,各种姿势都行。需要
数据
迁移
的技术完整手册
oracle
迁移
达梦常见问题
汇总
迁移
过程中失败任务数低于5%,大部分对象和
数据
都能够保证正常
迁移
。其中对于出错的任务,主要有导表和导函数包两部分。其中主要棘手的在与
迁移
函数包等对象时的问题。 2、
迁移
错误详解 2.1、通用问题 说明:对于...
云
数据
迁移
:将
数据
迁移
到AWS的6种策略
企业云之旅的第一步通常是将
数据
迁移
到云上。 AWS提供多种
数据
存储服务,并提供多样的将
数据
迁移
到云端的方法。可能你会想,将
数据
进行备份还原,收集转移设备
数据
流,一次性转移大量
数据
,或者使用专线直连,然后想...
大
数据
系列2020-
数据
迁移
工具资料
汇总
(sqoop、kettle、datax).zip
大
数据
系列2020-
数据
迁移
工具资料
汇总
(sqoop、kettle、datax).zip
花
数据
集+
数据
集
汇总
+标签txt+
数据
集
汇总
代码+
迁移
学习最佳模型+全部迭代最佳模型
花
数据
集+
数据
集
汇总
+标签txt+
数据
集
汇总
代码+
迁移
学习最佳模型+全部迭代最佳模型
Oracle 高级技术
3,491
社区成员
18,714
社区内容
发帖
与我相关
我的任务
Oracle 高级技术
Oracle 高级技术相关讨论专区
复制链接
扫一扫
分享
社区描述
Oracle 高级技术相关讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章