代码之家 › 专栏 › 技术社区 › S.Lott

将大负载反向(或撤消)到仓库事实表

data-warehouse

S.Lott · 技术社区 · 17 年前

目前,我们计划为加载的每批事实记录一个“批次id”。这样,我们可以在发现问题时退出负载。

我们是否应该考虑在维度行上跟踪批ID?

看起来维度行有不同的规则。如果我们将它们视为缓慢变化的,并使用一种保存历史的SCD算法,那么重新加载实际上意义不大。

典型情景。符合尺寸,处理SCD。载入事实。完成。

扩大符合尺寸,处理SCD。载入事实。找到一个问题。删除这批事实。解决问题。重新载入事实。完成。

跟踪维度变化似乎没有多大帮助。关于如何最好地处理数据仓库负载的“撤消”或“回滚”有什么指导吗?

1 回复 | 直到 17 年前

Jeffrey Hulten 17 年前

从我的角度来看,只要你没有滥用你的维度(比如跟踪时间到毫秒),那么通过跟踪维度进行回滚就不会有很多好处。此外,您还可以构建一个工具,每月清理一次未参照的标注。

推荐文章

RRG · 雪花数据仓库模式中的多个公共表?

8 年前

Rachel · 如何使用维度中的代理项键填充事实表

8 年前

Vinod Jayachandran · 用于星型架构的OLAP或OLTP?

8 年前

WhatsUp · 数据仓库设计-多个查找值

8 年前

user2263025 · Azure SQL数据仓库计算列错误

8 年前

boethius · 在包含连接的表上执行增量Sqoop?

8 年前

Ahmad Qasim · 如何使用talend获得这样的输出

8 年前

AbdeAMNR · 实现数据仓库

8 年前

The User · 基于azure data lake的polybase基准测试

8 年前

dead mah · 有人能帮我解决这个错误吗

8 年前