手机浏览器扫描二维码访问
Y是指每次抽取前先删除目标表
数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量
抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的
算法和条件代价时Y可以采用该方式。
这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务
操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数
据的递增加载Y没有风险
缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时
间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据
的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y
全表比对方式的准确性较差。
日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y
不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y
同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结
构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备
访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方
式有很大的局限性。
日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y
作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当
CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获
到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕
获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别
的某种可操作的方式将捕获到的变化同步到数据仓库当中去。
这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y
可以实现数据的递增加载缺点是业务系统数据库版本与产品不统
一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现
这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用
较高。
喜欢离语请大家收藏:()离语
被迫照顾主角后走不掉了[穿书] 大佬他怀了野狗崽[重生] 开局我有神技能 八岁开始模拟的我觉醒重瞳 全员好人,只有宿主是变态 军婚三年未见,离婚他急红眼 疯狗总裁和他的美人助理 奇世界 秦时:开局鬼谷饭桌多了一双筷子 洪荒:抛弃系统!我认鸿钧为义父 求生:魔法灾变世界 黑塔利亚:生存游戏 综穿之我只想过享福生活 全民领主:我的爆率百分百 领主:我的蚁族无限进化 重生三次后,可怜崽被团宠啦 毛绒小兔饲养指南 重生之都市丹帝:我已活了十万载 元始天尊传 穿越王朝当咸鱼,日刷三宝
传统古言宅斗女强男强双向奔赴王爷宠妻商贾之女高嫁侯府,成了上京笑谈。独守空房供养侯府六年,姜舒无怨无悔。可她苦等多年的夫君从边关归来,带回一妻两子。不仅如此,沈长...
很显然,这是跳舞的又一套新书。也将会是跳舞在起点的第五套全本。(注意,这本书是都市YY,呵呵。几乎没有什么神话色彩,更不会再有什么教皇教会宗教圣骑士吸血鬼玉皇大帝之类的东西了)...
论穿越到甜宠文大结局后是一种什么体验?姜澜雪表示,这金手指压根没用。原身入宫三月,却从未见过宣宁帝,因此,后宫嫔妃压根没将她放在眼里。不曾想姜澜雪穿越第一日就被召侍寝了,对此,众人依旧摇摇头表示不用担心。哪知接下来一连三日,宣宁帝都流连在姜澜雪的清光殿中。对此,众人表示,这不可能,肯定是因为齐王妃的缘故,陛下定然是...
关于抗战之血肉丛林岛寇荼毒,痛及滇西,谁无血气,忍弃边陲,桓桓将士,不顾艰危,十荡十决,甘死如饴,座中有圹,名勒丰碑,檩檩大义,昭示来兹。谨以此文献给曾经为了保卫国家出国在缅甸与倭寇决一死战的远征军将士们!历史不会忘记,中国人不会忘记,虽然你们曾经被记忆尘封,但是时间也绝不会让你们永远蒙尘!...
一粒沙可遮天地万物,一滴水可淹世间生灵。一念乾坤生,一念穹苍灭。一念岁月止,一念浮屠逝。少年身怀灭世九幽,领悟灭弑神龙之奥义,力战乾坤,主宰星辰,修得世间...
并指青云,气吞幽冥。大道交错,剑者独尊。这是一个人和一把剑的故事!红尘三千丈,琉璃染天香。群雄共逐鹿,剑尊掌苍黄。剑的真谛,万年之秘,以血海无涯重铸登天之路,以亿万枯骨再炼剑道经书。一切尽在太古剑尊。...