2024 年 3 月 29 日 – Data Quality Monitoring 版本说明

Data Quality Monitoring 和数据指标函数 – 预览版

在此版本中,Snowflake 很高兴地宣布推出具有数据指标函数 (DMFs) 的 Data Quality Monitoring 预览版。Data Quality Monitoring 使用 DMFs 持续监控数据质量指标,例如完整性、准确性、唯一性和有效性。您可以使用 Snowflake 提供的系统 DMFs 用于常见指标,例如行计数、重复项和新鲜度。或者,您可以创建自己的自定义 DMFs,定义特定于您自己的数据的指标。

您可以在查询中使用 DMF 测试管道中的数据质量或将 DMF 关联到所需表以持续监控其质量。持续监控既可以基于时间表进行定期测量,也可以基于触发器仅在基础表被修改时进行测量。DMF 结果将记录在 Snowflake 账户的集中事件表中,以保护您的数据隐私。您可以直接通过事件表创建仪表板、配置警报或查询指标结果。此外,事件表中的数据采用标准 OpenTelemetry 格式,易于与可观测性工具集成。

有关详细信息,请参阅 数据质量和数据指标功能简介

语言: 中文