2024 年 11 月 6 日 – SPLIT_TEXT_RECURSIVE_CHARACTER Cortex 函数 – 预览版

Snowflake 很高兴地宣布推出 SPLIT_TEXT_RECURSIVE_CHARACTER 函数的预览版。此函数递归地将字符串拆分为较小的文本块,以便将文本传递给嵌入或搜索索引函数。由于许多语言模型对它们可以处理的词元数量有限制,因此该函数对于处理多余词元的文本至关重要。

有关更多信息,请参阅 SPLIT_TEXT_RECURSIVE_CHARACTER (SNOWFLAKE.CORTEX)

语言: 中文