Fivetran产品更新:数据湖同步与dbt编排新能力
DataHot 速览
Fivetran本月更新发布多项新功能。Snowflake Linked Destination进入beta,可在托管数据湖同步完成后自动执行Fivetran Quickstarts和dbt项目,确保基于最新源数据运行。Move Connector API进入beta,支持跨目标组迁移连接并保留游标继续增量同步。Connector SDK新增非结构化文件同步能力(Private Preview),可同步PDF、图片和Markdown以支持AI应用。此外,开发者文档资源中心整合了REST API、Terraform等文档。
为什么值得关注:数据集成厂商Fivetran的官方产品更新,涉及数据湖编排、连接迁移及非结构化数据支持,数据平台从业者可及时跟进能力变化。
本文目录 8 节
译文
AI 逐段翻译每个月,我们都会发送一份客户通讯,重点介绍产品和连接器的更新。以下是当月的完整产品更新,其中包含电子邮件未收录的额外内容。
我们也鼓励您查看Fivetran 发布说明,其中包含架构更改。
新版本
通过 Quickstarts 和 dbt 编排从数据湖中获取更多价值
现在处于测试阶段——在您的 Fivetran 托管数据湖同步完成后,使用我们新的 Snowflake 链接目标功能,在 Snowflake 中自动执行Fivetran Quickstarts和dbt 项目。
只需创建新的 Snowflake 目标,提供您的凭据和执行默认值,选择 Lakehouse Tables 作为表类型,并选择一个现有的托管数据湖目标。每次同步完成后,Fivetran 都会确保您的 Snowflake 表在运行计划项目之前完全更新,这样您就可以确信它们始终使用最新的源数据。
以更少的投入升级到托管数据湖
现在处于测试阶段,Move Connector API 允许您将连接从一个目标组移动到另一个目标组,从而更容易将工作负载迁移到 Fivetran 托管数据湖或其他目标。您可以选择保留现有的同步游标并从上次中断的位置继续增量同步,或者重置游标并在新目标中回填历史数据。了解更多。
通过支持非结构化文件的 Connector SDK 增强更多 AI 用例
现在处于私有预览阶段,Connector SDK 支持将 PDF、图像和 Markdown 文件等非结构化文件同步到兼容的目标。通过 Fivetran 获得结构化和非结构化数据,您可以使用更多企业数据构建更丰富的 AI 应用程序。了解更多。
通过新的开发者资源中心以编程方式管理 Fivetran
新的开发者资源中心将 Fivetran 的开发者文档集中在一个地方,包括 REST API、Powered by Fivetran 和 Terraform 的资源。Terraform 文档现在直接位于 Fivetran 文档网站上,与 Terraform Registry 并列,使您更容易找到以编程方式管理和自动化 Fivetran 所需的指南。了解更多。
新的标准连接器和改进
设置任何新连接器,即可享受免费的历史数据同步和 14 天连接器试用,以探索其全部功能。处于私有预览阶段的连接器在发布阶段完全免费使用。我们还重点介绍了一些对连接器的重要改进。
- 该 Stripe 连接器现在捕获更广泛的计费、信用和结账数据,让您更全面地了解信用、基于使用量的计费、订阅项目折扣、结账响应和关联账户。
- 该 Email 连接器现在可以直接从邮件正文中的 URL 获取和提取文件,为您同步传统邮件附件之外的文件提供了更大的灵活性。
- 该 Zuora 连接器现在支持三个新的审计跟踪表,让您更深入地了解 Zuora 租户中的登录活动、配置更改和对象级更改。
- Oracle 上的 SAP ECC现在处于私有预览阶段
- SAP OData现已全面可用
新的 Lite 连接器
Lite 连接器具有针对特定用例的加速开发周期。在文档中了解更多关于 Lite 连接器的信息,并在连接器目录中查看所有可用的 Lite 连接器。您可以通过链接转到您的 Fivetran 仪表板来添加本月的新 Lite 连接器(如下)。
私有预览
这篇内容对你有用吗?
反馈只用于改善内容筛选,不等同于收藏