如何验证数据集市中的正确数据？

作者: 生如夏花
发布时间: 2024-04-18 01:13:29 (1天前)
转自：

3 条回复

0#
回复此人
❀⚘粉༵红༵回༵忆༵⚘❀ | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 虽然如果你做了很多清理或转换它有一些缺点和潜在的问题，我发现你可以通过从星型模式重新生成输入文件来往返输入文件。然后简单地将输入文件与输出文件进行比较。它可能需要一些按摩来使它们匹配（一个是左边填充，另一个是右边填充）。 </p> <P> 通常，我有一个程序使用与ETL相同的布局并进行比较，忽略了字段内的对齐。此外，可能必须对文件进行排序 - 我使用的是命令行排序。 </p> <P> 如果您的ETL转换不正确并且您转换不正确，那么此方法仍然可能不会显示DW中的每个问题，并且我不会声称它具有完全覆盖，但它在回归中是一个非常好的第一次重击每个负载的单元测试。 </p> </DIV>

编辑
1#
回复此人
無口君 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 您可以通过在其他地方实施相同数据操作的简化，减少的子集并比较结果来测试事实表加载。 </p> <P> 您至少两次计算相同的总数，计数或其他数字。一旦从事实表本身，在它完成加载后，一次从一些 <EM> 其他 </EM> 资源： </p> <UL> <LI> 源数据直接控制源和事实之间的所有擦洗步骤 </LI> <LI> 已知正确的源系统报告 </LI> <LI> 等等 </LI> </UL> <P> 如果您在数据库中执行此操作，则可以将每个测试编写为查询，如果一切正确则不返回任何记录。返回的任何记录都是例外：x by（y，z）的计数不匹配。 </p> <P> 看到这个很棒 <a href="https://stackoverflow.com/questions/440346/how-to-approach-an-etl-mission/440439#440439"> 岗位 </A> 由ConcernedOfTunbridgeWells提供更多建议。 </p> </DIV>

编辑

登录后才能参与评论