手机浏览器扫描二维码访问
Y是指每次抽取前先删除目标表
数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量
抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的
算法和条件代价时Y可以采用该方式。
这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务
操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数
据的递增加载Y没有风险
缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时
间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据
的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y
全表比对方式的准确性较差。
日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y
不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y
同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结
构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备
访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方
式有很大的局限性。
日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y
作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当
CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获
到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕
获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别
的某种可操作的方式将捕获到的变化同步到数据仓库当中去。
这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y
可以实现数据的递增加载缺点是业务系统数据库版本与产品不统
一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现
这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用
较高。
喜欢离语请大家收藏:()离语
我好痛,司慕哥哥,救我!在她危机四伏之时,梦中的男神从天而降,为了抱住他大腿,她开启了惊天地泣鬼神般的追夫模式。婚后司慕哥哥,有人欺负我。第二天,欺负她的人,惨遭报复,爬到她面前跪地求饶。某女纳闷,这个霸道冷情的男人,怎么一夜间,像变了个人,无时无刻要把她宠上天!少爷,少奶奶把您的名表打包扛出去低价卖了!某少微微眯眸她高兴就好。隔天,管家匆匆跑来少爷,少奶奶把您给卖了!某少...
我要不断的进球,进球进球进球!刷数据?是的,如果可以的话,我巴不得每场比赛都能帽子戏法。这是一本关于进球至上的书,这也是一本关于王者归来的故事。猪头七2018年全新力作!...
病弱王爷保家卫国?开玩笑!弱爆王妃调香高手?竟扯淡!可是,相传得传世至宝摄魂香居然被王爷和王妃拿来熏库房王爷,他们说你是病秧子嗯王爷一拳打断了一棵碗口粗的树桩王爷,他们还说你瘦成皮包骨嗯王爷抱着王妃回了房间王爷,他们还说还说你不行!他们是谁,本王定要打的他爹娘媳妇小妾都不认得他!...
云小九是一只小凶兽,每天除了吃,就是嘤嘤嘤,有天不小心穿进一本年代文里。 云家一连生了八个孙子,好不容易得来一个大孙女,全家上下都当金疙瘩疼着宠着。 村民以为云家孙女肯定很凶,毕竟他们一家子极品,家里的大鹅都见人就叼。 直到云家大婶子抱着刚满月的云小九出来遛弯,小奶团子粉粉嫩嫩,睫毛又翘又长,大眼睛随时包着两泡金豆豆,要哭不哭,萌人一脸血。 大婶子,小九这是怎么了? 云家大婶子看云小九一眼,着急往家赶,遭了,又饿了。 自从小凶兽来到云家,云家发生了翻天覆地的变化。 好吃懒做悍妇妈妈起...
为了逃避追杀,贺兰玖躲入水底,一不小心看见了某妖孽的果体。她嘴贱问哥哥,你那个有舌头长吗?一句话引发血案,她被妖孽毁了清白!这下梁子结大了!等妖孽落难了,她又狠阴了他一把。得逞后,她阴险笑了你毁我清白,我让你不举,公平吧。妖孽反击那我们就凑成对吧。!!!妖孽宣言本王可以欺负你,但,别人不行!...
...