社区
Oracle 高级技术
帖子详情
多台数据库的数据同步问题,急
zhanglz975301
2003-07-30 04:23:55
现有多台oracle数据库服务器,其中两台为主数据库(双机备份),还有3台到5台的分数据库,分数据库要和主数据库的部分表数据同步。所有的数据库均为oracle8.1.7
请问应如何实现?
...全文
89
7
打赏
收藏
多台数据库的数据同步问题,急
现有多台oracle数据库服务器,其中两台为主数据库(双机备份),还有3台到5台的分数据库,分数据库要和主数据库的部分表数据同步。所有的数据库均为oracle8.1.7 请问应如何实现?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
7 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
smallcrocodile
2003-11-11
打赏
举报
回复
关注
zhanglz975301
2003-08-05
打赏
举报
回复
数据量大概在10M左右,网络没问题(专网),刷新间隔大概每小时一次
zhoubf725
2003-08-01
打赏
举报
回复
只读应用?数据量?刷新间隔?局域or广域?
zhengg21
2003-07-31
打赏
举报
回复
我记得数据库里有一种机制是多个数据库同步的,名字不记得了,你自己查查吧
zhanglz975301
2003-07-31
打赏
举报
回复
难道没有人关心吗
zhanglz975301
2003-07-30
打赏
举报
回复
有没有现成的软件?
zhanglz975301
2003-07-30
打赏
举报
回复
最好能说详细点!
利用db_link创建物化视图
数据
同步
到
数据
仓库
物化视图
同步
数 1. 用途 现在需要把生产
数据
库
中的部分
数据
同步
到
数据
仓库中,考虑到成本和便捷性,采用定期刷新物化视图的方式
同步
数据
。 2. 整体实施思路 l 首先创建一个dblink,可以访问远程
数据
库
。 l 在本地创建一个物化视图,存储远程
数据
表,当远程
数据
表有变化时,会定时刷新到物化视图中。 l 创建oracle job定时刷新表 3
【数仓】
数据
同步
-
数据
仓库的
数据
来源之二
数据
仓库的
数据
最主要的来源有两个,一是前面讲过的日志采集,将前端埋点产生的 log 文件解析之后存入
数据
仓库。而今天要讲解是另外一部分
数据
——
数据
库
数据
同步
。这一部分主要是将
数据
库
中的业务
数据
同步
到
数据
仓库。当然这只是
数据
同步
的一个方面,数仓中计算好的
数据
也会
同步
进入
数据
服务或
数据
应用两个方面。本文参考《大
数据
之路》,对书中的要点进行记录。可以关注公众号回复 802 获取 pdf。 1.
数据
同步
基础
数据
同步
的原业务系统的
数据
类型多种多样,主要分为关系型
数据
库
的结构化
数据
和非关系型
数据
库
的非结构化数
DB
数据
同步
到Hive
数据
仓库
背景 在
数据
仓库建模中,未经任何加工处理的原始业务层
数据
,我们称之为ODS(Operational Data Store)
数据
。在互联网企业中,常见的ODS
数据
有业务日志
数据
(Log)和业务DB
数据
(DB)两类。对于业务DB
数据
来说,从MySQL等关系型
数据
库
的业务
数据
进行采集,然后导入到Hive中,是进行
数据
仓库生产的重要环节。 如何准确、高效地把MySQL
数据
同步
到Hive中?一般常用的解决方...
数据
同步
之大
数据
下
数据
仓库的
同步
方式
数据
仓库的特性是集成,把不同
数据
源、不同形式的
数据
整合在一起。大
数据
下的
数据
特点如下: ①
数据
多样性:包括高度结构化,易于处理的结构化
数据
以及服务器日志、图片、视频等非结构化
数据
②
数据
量:传统的
数据
仓库每天的
同步
量在几百GB上下,大型的
数据
仓库每天达PB级别,甚至EB级别 批量
数据
同步
: 1)离线的
数据
线仓库用于负责将不同
数据
源的
数据
同步
到
数据
仓库,以及定时将
数据
同步
到业务系统 2)要...
数仓学习|几种常见的
数据
同步
方式
目录前言(1)常见
数据
同步
方式(1.1)直连
同步
(1.2)实时增量
同步
(日志解析)(2)流式
数据
集成实现 前言
数据
仓库的特性之一是集成,即首先把未经过加工处理的、不同来源的、不同形式的
数据
同步
到ODS层,一般情况下,这些ODS层
数据
包括日志
数据
和业务DB
数据
。对于业务DB
数据
而言(比如存储在MySQL中),将
数据
采集并导入到数仓中(通常是Hive或者MaxCompute)是非常重要的一个环节。 那么,该如何将业务DB
数据
高效准确地
同步
到数仓中呢? 一般企业会使用两种方案: 直连
同步
实时增量
同步
(
数据
库
Oracle 高级技术
3,499
社区成员
18,709
社区内容
发帖
与我相关
我的任务
Oracle 高级技术
Oracle 高级技术相关讨论专区
复制链接
扫一扫
分享
社区描述
Oracle 高级技术相关讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章