手机浏览器扫描二维码访问
EtL是企业数据仓库构建过程中的一个核心步骤Y我们可以借助于EtL
工具来高效地完成数据抽取转换和加载工作之所以需要EtL工具Y
主要有以下几个原因x
?
1?当数据来自不同的物理主机Y这时候如果使用SqL语句去处理的
话Y就显得比较吃力且开销也更大]
?
2?数据来源可以是各种不同的数据库或者文件Y这时候需要先把它
们整理成统一的格式后才可以进行数据的处理Y这一过程用代码实现
显然有些麻烦]
?
3?在数据库中我们当然可以使用存储过程去处理数据Y但是Y处理
海量数据的时候Y存储过程显然比较吃力Y而且会占用较多数据库的
资源Y这可能会导致数据库资源不足Y进而影响数据库的性能。
。
在选择EtL工具时主要考虑如下因素x
?对平台的支持程度]
?抽取和装载的性能是不是较高Y且对业务系统的性能影响大不
大,高不高]。
?对数据源的支持程度]。
?是否具有良好的集成性和开放性]。
?数据转换和加工的功能。
?是否具有管理和调度的功能。
cdc解决方案包括变化捕捉代理变化数据服务和变化分发机制三个
组成部分
?
1?变化捕捉代理变化捕捉代理是一个软件组件Y它负责确定和捕
捉发生在操作型数据存储源系统中的数据变化可以对变化捕捉代理
进行专门优化Y使它适用于特定的源系统Y比如使用数据库触发器]
也可以使用通用的方法Y比如数据日志比较。
变化数据服务变化数据服务为变化数据捕捉的成功实现提供了
一系列重要的功能Y包括过滤排序附加数据生命周期管理和审
计等表6-4给出了每个功能的解释。
变化分发机制变化分发机制负责把变化分发到变化的消费者?通
常是EtL程序?那里变化分发机制可以支持一个或多个消费者Y并且提
供了灵活的数据分发方式Y包括推(push)或拉(pull)的方式pull方式需要
消费者周期性地发送请求Y通常采用标准接口实现Y比如odbc或Jdbc
push方式需要消费者一直监听和等待变化的发生Y一旦捕捉到变化Y就立
刻转移变化的数据Y通常采用消息中间件来实现变化分发机制的另一个
重要功能就是提供动态返回和请求旧的变化的能力Y从而满足重复处理和
扮演岩王帝君多年后,我穿回来了 抗战之烽火特勤组 盗墓:开局让吴二白暴揍黑瞎子 最强赛亚人传说 退婚当天,三崽带我闪婚千亿隐富 爱上她的理由 白昼独行 天灾末世小人物囤货带美女跑路了 仙道衍 生子就变强,我一年365胎 西游之白话版 我与十位,美女总裁的故事 强撩!暗哄!我怀了全球首富的崽 快穿:尤物穿成万人嫌工具人女配 闪婚后偏执大佬每天狂宠我 将军公主 爸爸,求你,不要打我了 女魔头只想攻略她师叔 兽世重生,情敌太多狼夫哭唧唧 资深颜控闯荡娱乐圈
本书又名你是我戒不掉的甜秦南御第一次遇见纪微甜,丢了重要信息。秦南御第二次遇见纪微甜,丢了相亲对象。秦南御第三次遇见纪微甜,丢了人如果有人问他,最厌恶的异性类型是什么样的,他会毫不犹...
18岁那年,我娘被我爹打死,然后我爹娶了个和我一样大的后娘进门。7天后,我娘爬出棺材,敲开了我父亲的门欢迎关注我的微博大家看的时候记得先登陆(QQ号直接登陆就可以了!)然后点一下封面下面的推荐按钮!加更规则200个钻石加一更!单独打赏两个玉佩加一更!一个皇冠加五更!关键词阴娘最新章节阴娘小说阴娘全文阅读...
段飞是个倒霉的孩子,老爹被人陷害入狱,又遭遇对象退婚,开间小诊所给村里的人治病,连温饱都不行。可他从未放弃过努力,他坚信只要人不死,必定有站在人生巅峰的那天,最后他用枚小小的银针走上复仇之路,凭精湛的针灸获得无数美女青睐陪伴。这是个励志故事,段飞的崛起之路经受无数阴谋陷害,可他为了坚守正义毫不畏惧,视死如归跟邪恶力量做斗争。...
八年前,雷霆古城一夜惊变,少城主秦命押入青云宗为仆,二十万民众赶进大青山为奴。八年后,淬灵入武,修罗觉醒,不屈少年逆天崛起。给我一柄刀,可破苍穹,给我一柄剑,可指霄汉。金麟岂是池中物,一遇风云便化龙。当修罗子不死王雷霆战尊古海蛮皇等等一个个封号落在秦命身上,这个一身傲骨的少年踏天而行,带领一众挚友红颜,傲战八...
2o19云起华语文学征文大赛参赛作品胖喵儿死了,被一根鸡骨头卡死了!重生在了一个生了九个孙儿,盼孙女盼的眼睛都红了的阮家,瞬间成了阮家上下三代的团宠!胖喵儿笑眯眯,觉得这有奶奶宠,爸妈爱,哥哥护的小日子,真叫一个美滋滋哟。当然,如果没有某只躲在角落里,眼睛里放着绿光,死死盯着她的‘大灰狼’,那就更好了!某只‘大灰狼’冷笑一声上辈子没吃到,这辈子总要吃到的!胖喵儿へノ...
作为醉月楼唯一一个男人,杨辰觉得压力很大。通过我洗的衣服来判断,李姐姐胖了两斤,王姐姐瘦了点,还有,能不能别让马姐姐穿那么性感的衣服,我洗衣服压力很大的。杨辰需要每天像老鸨这样汇报着工作。除此之外,他还要严守自己的贞操。杨辰,今天晚上来侍寝!让姐姐亲一个!记住,别躲,今晚,你是我的。...