关于 Openflow Connector for SQL Server¶

工作流程¶

1. SQL 服务器数据库管理员需执行以下任务：

   1. 配置 SQL 服务器复制设置，并对数据库和表启用变更跟踪。

   2. 为连接器创建凭据。

   3. （可选）提供 SSL 证书。

2. Snowflake 账户管理员需执行以下任务：

   1. 为连接器创建服务用户、数据仓库和用于复制的目标数据库。

   2. 安装连接器。

   3. 为连接器流程定义指定所需的参数。

   4. 运行流程。在 Openflow 中运行时，连接器执行以下操作：

      1. 创建一个架构，用于日志表。

      2. 创建与源表对应的架构和目标表，用于复制。

      3. 按照表复制生命周期启动复制流程，详见 如何复制表 部分。

如何复制表¶

表的复制分为以下几个阶段：

1. 架构自检：连接器会发现源表中的列、包括列名和数据类型，然后根据 Snowflake 和连接器的限制来验证它们。验证失败会导致此阶段失败，并且周期完成。如果成功完成该阶段，连接器将创建一个空目标表。

2. 快照加载：连接器将源表中的所有可用数据复制到目标表中。如果此阶段失败，则不会再复制任何数据。成功完成后，源表中的数据将在目标表中可用。

3. 增量加载连接器跟踪源表中的更改并将这些更改应用到目标表。此过程将一直持续，直到从复制中移除该表。如果该阶段失败，将永久停止源表的复制，直到问题解决。

支持的 SQL 服务器版本¶

下表列出了经过测试和官方支持的 SQL 服务器版本。

Openflow 要求¶

• 运行时大小必须至少为“Medium”。复制大容量数据时请使用更大的运行时环境，尤其是在行大小较大的情况下。

• 该连接器不支持多节点 Openflow 运行时。使用 Min nodes 配置此连接器的运行时，并将 Max nodes 设置为 1。

限制¶

• 连接器仅支持使用用户名和密码的方式进行身份验证，以连接 SQL 服务器。

• 该连接器仅复制受 Snowflake 支持的数据类型的表。有关这些数据类型的列表，请参阅 数据类型摘要。

• 连接器要求每个复制的表都有主键。

• 当在源数据库添加一个带默认值的 NOT NULL 新列时，连接器不会更新 Snowflake 数据库中已有的记录。

• 当在 Column Filter JSON 的包含列表中添加新列时，连接器不会更新 Snowflake 数据库中已有的记录。

• 在源数据库中删除某列后，再用相同名称添加回该列，后续的额外删除操作会导致错误。

• 在 Column Filter JSON 中包含某列后又将其排除，后续再次尝试包含该列会导致错误。

• 该连接器支持源表架构更改，但不支持更改主键定义、数字列的精度或小数位数。

• 该连接器不支持截断表操作。

后续步骤¶

设置 Openflow Connector for SQL Server