彩神排列三_神彩排列三官方

MaxCompute数仓维护心得

时间:2020-01-07 01:22:32 出处:彩神排列三_神彩排列三官方

同步的源数据要处置使用视图,在客户的生产环境上这种这种突然冒出过这种这种的情况:机会生成视图的存储过程优化不好,同步视图在同步任务发起请求后刚刚如此生成出来,意味同步任务及后续的ETL挂起达数小时之久,所刚刚续和数据提供方接洽,将数据源从视图换为表,保证在同步刚刚同步表里的内容机会更新。

Tip1.处置同步视图

在维护客户基于MaxCompute搭建的数据仓库时,让让.我 遇到过这种疑问,踩过这种坑,共同积累了这种经验,也初步形成了一套操作流程规范,在这里与让让.我 以Tip的形式与让让.我 分享一下。

在测试环境下,通过修改数据集成中的同步任务实现数据源从视图切换成表。再确认不同的数据源的表数据外部完整一致刚刚,修改如下同步脚本中的table值为新的表名。

机会在同步脚本里truncate字段为true,这种这种再次同步数据时该分区内的旧数据会被擦除,在修改以能不需要 不需要 直接

热门

热门标签