笔趣阁

手机浏览器扫描二维码访问

第290章 牛肉河粉(第3页)

Y是指每次抽取前先删除目标表

数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量

抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的

算法和条件代价时Y可以采用该方式。

这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务

操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数

据的递增加载Y没有风险

缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时

间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据

的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y

全表比对方式的准确性较差。

日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y

不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y

同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结

构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备

访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方

式有很大的局限性。

日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y

作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当

CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获

到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕

获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别

的某种可操作的方式将捕获到的变化同步到数据仓库当中去。

这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y

可以实现数据的递增加载缺点是业务系统数据库版本与产品不统

一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现

这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用

较高。

喜欢离语请大家收藏:()离语

热门小说推荐
娇妻太水嫩,总裁宠上瘾

娇妻太水嫩,总裁宠上瘾

我好痛,司慕哥哥,救我!在她危机四伏之时,梦中的男神从天而降,为了抱住他大腿,她开启了惊天地泣鬼神般的追夫模式。婚后司慕哥哥,有人欺负我。第二天,欺负她的人,惨遭报复,爬到她面前跪地求饶。某女纳闷,这个霸道冷情的男人,怎么一夜间,像变了个人,无时无刻要把她宠上天!少爷,少奶奶把您的名表打包扛出去低价卖了!某少微微眯眸她高兴就好。隔天,管家匆匆跑来少爷,少奶奶把您给卖了!某少...

进球万岁

进球万岁

我要不断的进球,进球进球进球!刷数据?是的,如果可以的话,我巴不得每场比赛都能帽子戏法。这是一本关于进球至上的书,这也是一本关于王者归来的故事。猪头七2018年全新力作!...

王妃心尖,病娇坏王爷!

王妃心尖,病娇坏王爷!

病弱王爷保家卫国?开玩笑!弱爆王妃调香高手?竟扯淡!可是,相传得传世至宝摄魂香居然被王爷和王妃拿来熏库房王爷,他们说你是病秧子嗯王爷一拳打断了一棵碗口粗的树桩王爷,他们还说你瘦成皮包骨嗯王爷抱着王妃回了房间王爷,他们还说还说你不行!他们是谁,本王定要打的他爹娘媳妇小妾都不认得他!...

饕餮娇气包在八零

饕餮娇气包在八零

云小九是一只小凶兽,每天除了吃,就是嘤嘤嘤,有天不小心穿进一本年代文里。  云家一连生了八个孙子,好不容易得来一个大孙女,全家上下都当金疙瘩疼着宠着。  村民以为云家孙女肯定很凶,毕竟他们一家子极品,家里的大鹅都见人就叼。  直到云家大婶子抱着刚满月的云小九出来遛弯,小奶团子粉粉嫩嫩,睫毛又翘又长,大眼睛随时包着两泡金豆豆,要哭不哭,萌人一脸血。  大婶子,小九这是怎么了?  云家大婶子看云小九一眼,着急往家赶,遭了,又饿了。  自从小凶兽来到云家,云家发生了翻天覆地的变化。  好吃懒做悍妇妈妈起...

王爷狠狠疼:爆笑小邪妃

王爷狠狠疼:爆笑小邪妃

为了逃避追杀,贺兰玖躲入水底,一不小心看见了某妖孽的果体。她嘴贱问哥哥,你那个有舌头长吗?一句话引发血案,她被妖孽毁了清白!这下梁子结大了!等妖孽落难了,她又狠阴了他一把。得逞后,她阴险笑了你毁我清白,我让你不举,公平吧。妖孽反击那我们就凑成对吧。!!!妖孽宣言本王可以欺负你,但,别人不行!...

每日热搜小说推荐