笔趣阁

手机浏览器扫描二维码访问

第326章 夜宵(第3页)

Y是指每次抽取前先删除目标表

数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量

抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的

算法和条件代价时Y可以采用该方式。

这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务

操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数

据的递增加载Y没有风险

缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时

间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据

的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y

全表比对方式的准确性较差。

日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y

不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y

同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结

构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备

访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方

式有很大的局限性。

日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y

作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当

CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获

到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕

获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别

的某种可操作的方式将捕获到的变化同步到数据仓库当中去。

这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y

可以实现数据的递增加载缺点是业务系统数据库版本与产品不统

一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现

这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用

较高。

喜欢离语请大家收藏:()离语

热门小说推荐
你暗设情局,我哑口无言

你暗设情局,我哑口无言

人人都羡慕叶晚一个哑巴能嫁给A城女人的梦中情人秦正霆。只有叶晚知道,那是无尽折磨。他与别的女人夜夜笙歌,她却被迫陪他的客户。她是别人眼里的荡妇,每晚为他独守空房。直到秦正霆的真爱回归。那个忍气吞声的哑巴叶晚忽然...

大唐御医

大唐御医

大唐御医由作者半堕落的恶魔创作全本作品该小说情节跌宕起伏扣人心弦是一本难得的情节与文笔俱佳的好书919言情小说免费提供大唐御医全文无弹窗的纯文字在线阅读。...

冷酷男神追逃妻

冷酷男神追逃妻

一觉醒来,发现身边竟然有个人。她打量了一会儿枕边的这个男人,怎么看怎么帅。这么帅的男孩子,怎么会看上她?难不成?昨晚是她占了人家的便宜?天啊!那这个人醒来岂不是得揍死她?她穿上衣服溜之大吉,跟着她一起带走的是他的一个孩子。她对他一见钟情,却不知道他的名字与身份。被人设计,她与他一夜疯狂。本以为此生无缘再见,他却留给她一个孩子。为了这个孩子,她不惜与父亲断绝父女关系,被父亲赶出家门。而他本是冷漠到让人怀疑他是Gay,人生第一次没控制住自己。他不记得她的面容,五年后,再次相遇,二人渐渐相爱。但继母与情敌的阴谋,让他们误会,无法相认...

无敌护卫

无敌护卫

他是最优秀的保镖。在被迫退役后,来到了中海市和他那从未见过的未婚妻结婚。女神级总裁老婆,暴力警花,可爱的美少女,冷艳的黑道美女等各色美女纷至沓来!...

异界修神传奇

异界修神传奇

一个懵懂的少年,穿越到了异界。身负鸿钧当年记载悟道心得的奇书,以及鸿钧用来镇压灵脉的神剑,原本平凡的少年因此不再平凡。●●●●●●●●●●●●●●●●●●●●●●●●●●●●●●●...

每日热搜小说推荐