动态表的事件表监控和警报¶
本主题讨论如何查询提供刷新状态信息的事件表,以及如何针对事件表中的新数据设置警报。
查询事件表以监控刷新¶
动态表刷新时,您可以将 Snowflake 配置为记录一个事件,该事件提供有关刷新操作状态的信息。该事件记录在与动态表关联的 活动事件表 中。
例如,假设 已将事件表与数据库关联。该数据库中的动态表刷新时,Snowflake 会将事件记录到该事件表中。
您可以查询此活动事件表中记录的事件以监控动态表刷新。
例如,要获取时间戳、动态表名、查询 ID,以及数据库 my_db 中动态表错误的错误消息,请执行以下操作:
以下示例检索架构 my_schema 中动态表的上游错误的所有列:
有关查询事件表时需要使用的角色,以及用于筛选结果的条件的信息,请参阅 设置新数据警报。
设置新数据警报以监控刷新情况¶
如前所述,刷新动态表时,事件表中会记录一个事件,以指示刷新是成功还是失败。您可以设置 有新数据时发出警报,以监控事件表。您可以将警报配置为刷新失败时 发送通知。
以下部分介绍如何设置事件日志记录以捕获事件、如何设置警报,以及如何解释事件表中记录的事件:
备注
记录动态表的事件会产生费用。请参阅 遥测数据收集成本。
设置要捕获的事件的严重性级别¶
备注
如果您未设置严重性级别,则不会捕获任何事件。
要设置要记录到事件表的动态表事件,请 设置您要在时间表中捕获的事件的严重性级别。事件在以下级别捕获:
ERROR:刷新失败事件。WARN:刷新上游动态表失败和刷新失败事件。INFO:成功刷新事件、上游动态表刷新失败和刷新失败事件。
要设置级别,请为账户或对象设置 LOG_LEVEL 参数。您可以为以下内容设置级别:
账户中的所有对象。
数据库或架构中的所有对象。
特定的动态表。
例如:
要捕获账户中所有对象的 ERROR 级事件和消息,请执行 ALTER ACCOUNT SET LOG_LEVEL:
请注意,此级别会影响账户中所有类型的对象,包括 UDFs、存储过程、动态表和任务。
要捕获数据库
my_db中所有对象的 INFO 级事件和消息,请执行 ALTER DATABASE ...SET LOG_LEVEL:与在账户上设置级别的情况类似,在数据库上设置级别会影响数据库中所有类型的对象,包括 UDFs、存储过程、动态表和任务。
要捕获动态表
my_dynamic_table的 WARN 级事件,请执行 ALTER DYNAMIC TABLE ... SET LOG_LEVEL:
设置新数据警报¶
设置日志记录事件的严重性级别后,您可以设置新数据警报,以监控事件表中是否有指示动态表刷新失败的新事件。在事件表中插入新行并满足警报中指定的条件时,将触发新数据警报。
备注
要创建新数据警报,您必须使用已被授予查询事件表所需权限的角色。
如果警报条件查询默认事件表 (SNOWFLAKE.TELEMETRY.EVENTS)或预定义视图(SNOWFLAKE.TELEMETRY.EVENTS_VIEW 视图),请参阅 访问默认事件表和 EVENTS_VIEW 的角色。
要管理 EVENTS_VIEW 视图的访问权限,请参阅 管理对 EVENTS_VIEW 视图的访问权限。
如果警报条件查询自定义事件表,请参阅 事件表的访问控制权限。
要管理自定义事件表的访问权限,请参阅 管理对事件表数据的访问。
在警报条件中,要查询动态表事件,请选择 resource_attributes:"snow.executable.type" = 'DYNAMIC_TABLE' 的行。要缩小事件列表的范围,您可以筛选以下列:
要将结果限制为特定数据库中的动态表,请使用
resource_attributes:"snow.database.name"。要返回因动态表错误而刷新失败的事件,请使用
value:state = 'FAILED'。要返回因上游动态表错误而刷新失败的事件,请使用
value:state = 'UPSTREAM_FAILURE'。
有关为动态表事件记录的值的信息,请参阅 为动态表事件记录的信息。
备注
事件表中的 timestamp 列将值存储在 UTC 中。如果您使用带有时间戳筛选器的计划警报(例如 timestamp > DATEADD('minute', -5, CURRENT_TIMESTAMP())),请将当前时间戳转换为 UTC 以确保准确比较:
例如,以下语句会创建新数据警报,在数据库 my_db 中动态表刷新失败时执行操作。该示例假定:
您的活动事件表是 默认事件表 (SNOWFLAKE.TELEMETRY.EVENTS)。
您已为该 Slack 通道 设置 Webhook 通知集成。
为动态表事件记录的信息¶
当动态表刷新时,事件将记录到事件表中。以下各章节介绍表示事件的事件表行:
事件表列值¶
当动态表刷新时,将向事件表中插入具有以下值的行。
备注
如果列未在下面列出,则事件的列值为 NULL。
resource_attributes 列中的键值对¶
resource_attributes 列包含具有以下键值对的 OBJECT 值:
属性名称 |
属性类型 |
描述 |
示例 |
|---|---|---|---|
|
INTEGER |
包含动态表的数据库的内部/系统生成的标识符。 |
|
|
VARCHAR |
包含动态表的数据库的名称。 |
|
|
INTEGER |
已刷新的动态表的内部/系统生成的标识符。 |
|
|
VARCHAR |
已刷新的动态表的名称。 |
|
|
VARCHAR |
对象的类型。值为动态表事件的 |
|
|
INTEGER |
具有动态表 OWNERSHIP 权限的角色的内部/系统生成的标识符。 |
|
|
VARCHAR |
具有动态表 OWNERSHIP 权限的角色的名称。 |
|
|
VARCHAR |
拥有对象的角色类型,例如 |
|
|
VARCHAR |
刷新动态表的查询的 ID。 |
|
|
INTEGER |
包含动态表的架构的内部/系统生成的标识符。 |
|
|
VARCHAR |
包含动态表的架构的名称。 |
|
|
INTEGER |
用于刷新动态表的仓库的内部/系统生成的标识符。 |
|
|
VARCHAR |
用于刷新动态表的仓库的名称。 |
|
record 列中的键值对¶
record 列包含具有以下键值对的 OBJECT 值:
键 |
类型 |
描述 |
示例 |
|---|---|---|---|
|
VARCHAR |
事件的名称。值为动态表刷新的 |
|
|
VARCHAR |
事件的严重性级别,为以下值之一:
|
|
value 列中的键值对¶
value 列包含具有以下键值对的 VARIANT 值:
键 |
类型 |
描述 |
示例 |
|---|---|---|---|
|
VARCHAR |
刷新状态,为以下值之一:
|
|
|
VARCHAR |
如果 |
|