手机浏览器扫描二维码访问
Y是指每次抽取前先删除目标表
数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量
抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的
算法和条件代价时Y可以采用该方式。
这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务
操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数
据的递增加载Y没有风险
缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时
间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据
的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y
全表比对方式的准确性较差。
日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y
不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y
同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结
构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备
访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方
式有很大的局限性。
日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y
作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当
CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获
到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕
获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别
的某种可操作的方式将捕获到的变化同步到数据仓库当中去。
这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y
可以实现数据的递增加载缺点是业务系统数据库版本与产品不统
一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现
这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用
较高。
喜欢离语请大家收藏:()离语
强撩!暗哄!我怀了全球首富的崽 资深颜控闯荡娱乐圈 仙道衍 爱上她的理由 女魔头只想攻略她师叔 最强赛亚人传说 盗墓:开局让吴二白暴揍黑瞎子 退婚当天,三崽带我闪婚千亿隐富 扮演岩王帝君多年后,我穿回来了 白昼独行 天灾末世小人物囤货带美女跑路了 闪婚后偏执大佬每天狂宠我 西游之白话版 将军公主 兽世重生,情敌太多狼夫哭唧唧 抗战之烽火特勤组 生子就变强,我一年365胎 爸爸,求你,不要打我了 快穿:尤物穿成万人嫌工具人女配 我与十位,美女总裁的故事
18岁那年,我娘被我爹打死,然后我爹娶了个和我一样大的后娘进门。7天后,我娘爬出棺材,敲开了我父亲的门欢迎关注我的微博大家看的时候记得先登陆(QQ号直接登陆就可以了!)然后点一下封面下面的推荐按钮!加更规则200个钻石加一更!单独打赏两个玉佩加一更!一个皇冠加五更!关键词阴娘最新章节阴娘小说阴娘全文阅读...
这小小的四合院,住着一群租房客,而陈阳则是房东。好吧,既然如此,保护房客这个光荣而艰巨的任务,只能落在我的头上了。陈阳书友QQ群188631860...
穷小子楚帅,先赚了一个极品级二奶,却原来是间谍精英,然后,一个大陆女警官凌小杰好有暗恋他,可是,穷小子还有一个比鸟齐飞的原配初恋,还有一个女朋友的死党小魔女蓝菲,还有几乎是后宫佳丽如云,不过,一个个美眉都有好神秘的身份,你中有我,我中有你...
...
吃货林思念重生到了八零年,面对这桩谋算来的婚姻,男人的冷漠,她却像打了鸡血似的,誓要把男主拿下。男人的冷漠与误会让她终于有了离开的想法,可军婚不好离,她不信邪的为离婚奋斗着。可这冷漠的男人从什么时候起,紧紧的追着她的脚步,还恬不知耻的要和她生儿子。呸,谁要和你生儿子?你有儿子了好不好,要生也是生一个像她一样漂亮可爱...
...