手机浏览器扫描二维码访问
Y是指每次抽取前先删除目标表
数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量
抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的
算法和条件代价时Y可以采用该方式。
这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务
操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数
据的递增加载Y没有风险
缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时
间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据
的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y
全表比对方式的准确性较差。
日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y
不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y
同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结
构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备
访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方
式有很大的局限性。
日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y
作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当
CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获
到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕
获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别
的某种可操作的方式将捕获到的变化同步到数据仓库当中去。
这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y
可以实现数据的递增加载缺点是业务系统数据库版本与产品不统
一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现
这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用
较高。
喜欢离语请大家收藏:()离语
爸爸,求你,不要打我了 扮演岩王帝君多年后,我穿回来了 天灾末世小人物囤货带美女跑路了 兽世重生,情敌太多狼夫哭唧唧 快穿:尤物穿成万人嫌工具人女配 爱上她的理由 我与十位,美女总裁的故事 强撩!暗哄!我怀了全球首富的崽 仙道衍 盗墓:开局让吴二白暴揍黑瞎子 西游之白话版 将军公主 资深颜控闯荡娱乐圈 白昼独行 最强赛亚人传说 闪婚后偏执大佬每天狂宠我 生子就变强,我一年365胎 退婚当天,三崽带我闪婚千亿隐富 女魔头只想攻略她师叔 抗战之烽火特勤组
养父母待她如珠如宝,她却心心念念的想要回到抛弃她待她如糠如草的亲生父母身边儿,犯蠢的后果就是养母死不瞑目,养父断绝来往,她,最终惨死车轮下重来一次,她要待养父母如珠如宝,待亲生父母如糠如草!至于抢她一切的那个亲姐姐,呵,你以为还有机会吗?哎哎哎,那个兵哥哥,我已经定亲了,你咋能硬抢?!哎哎哎...
...
穿越成为火影中的奈良鹿丸!因穿越加上‘星’的能力,精神力强大到惊粟!觉醒血继限界‘影瞳’!ltBRgt先是小小的复制一套影忍法!再觉醒万花筒,剥夺影子!强者尾兽的影子一个也不放过,佐助更是憋屈的挂掉!大小美女更是一个也不放过…...
本书又名你是我戒不掉的甜秦南御第一次遇见纪微甜,丢了重要信息。秦南御第二次遇见纪微甜,丢了相亲对象。秦南御第三次遇见纪微甜,丢了人如果有人问他,最厌恶的异性类型是什么样的,他会毫不犹...
这里有西楚霸王‘项羽’。这里有绝代杀神‘白起’。这里有千古奇人‘鬼谷子’。这里有西府赵王‘李元霸’。这里有盖世猛将‘吕布’。这是一个开挂的故事,生死看淡,不服就干!人呢?快进来扶扶朕(疯狂暗示加入书架),朕要拿传国玉玺,给读者老爷们砸核桃!什么?不吃核桃?没关系,拿朕的金箍棒来。给读者老爷们先剔剔牙,再随朕前往...
现代第一特工穿越倚天神雕天龙,坐拥花丛的传奇故事!宁可错杀三千也不放过一个!‘穿越’,你绝对没听错。倚天神雕,美女无数,一个个冰清玉洁的清纯玉女,如何‘穿越’,还等什么?赶快点击吧!...