Amazon收购DuckLabs，DuckDB接入Aurora

亚马逊已宣布收购DuckLabs这家总部位于阿姆斯特丹的公司是分析型数据库DuckDB背后的开发方。

据消息称，DuckDB的创造者、DuckLabs联合创始人Hannes Mühleisen和Mark Raasveldt将作为AWS的一部分继续领导团队以及该开源项目的技术方向。

在他们博客上的公告中，Mühleisen和Raasveldt解释了决定加入AWS的原因：

加入AWS为我们提供了资源和覆盖范围，将这项技术带给更多开发者和组织，并以我们独自难以达到的规模去实现各种想法。

交易所有相关方都向社区保证，DuckLabs维护的项目未来无忧。DuckDB及其“Duck Stack”的所有组件，如DuckLake和Quack，将继续以MIT许可证保持免费和开源，而非营利性的DuckDB基金会将继续监督这些项目。

在公告中，AWS技术副总裁Mai-Lan Tomsen Bukovec解释了DuckDB的创立初衷：

DuckDB旨在解决当今世界90%以上的数据查询对极快性能的需求，这些查询在分析和仪表板场景中通常处理1TB或更少的数据。

她认为，DuckDB的优化和性能在代理式AI工作负载中尤为相关。AI代理在决定如何推进之前，通常会检查数据并运行小规模的探索性查询，这种模式使DuckDB天然适合AI用例。

社区对这一消息表示欢迎，但也带有一些疑虑。在Reddit上，adappergentlefolk写道：

我希望这不会减缓他们一直以来的创新步伐，但我很高兴他们找到了一种方式，既能从自己的工作中获利，又能通过基金会将大部分成果保持开源。

在Werner Vogels博客的一篇文章中，AWS杰出工程师Andy Warfield分享了更多关于AWS与DuckLabs之间的关系在收购前如何发展的细节。他写道，最初的接触发生在S3团队开发S3 Tables的时候。随后合作不断演进，他解释道：

在过去两年左右的时间里，我们的团队合作越来越紧密，合作领域也不断扩大。我们探索了将AWS Lambda作为快速启动DuckDB查询的匹配原语，并通过DuckDB不断演进的ATTACH和CONNECT命令，简化了DuckDB与AWS数据库和分析引擎之间的集成。

对Warfield而言，这笔交易是扩大联合创始人影响力的机会，而不是吸收他们的工作：

Hannes和Mark的愿景与我们在亚马逊对数据的思考方式高度一致，因此我们希望给他们尽可能广泛的机会，不仅为DuckDB设定议程，也为云端分析和交付方式设定议程。因此，经过多次对话[...]，我们共同决定让DuckLabs团队加入AWS。

收购之后，Amazon Aurora PostgreSQL成为首个获得由DuckDB驱动的面向用户功能的服。AWS首席解决方案架构师Esra Kayabali解释了这项新功能试图简化的工作负载类型。

此前，如果你的应用需要将Aurora中的近期事务数据与存储在Amazon S3中的历史记录相结合，常见做法是构建反向ETL管道，这会复制数据、增加基础设施成本，并需要持续的工程投入来保持一切同步。

在Aurora PostgreSQL中直接集成DuckDB后，单条查询即可将实时运营数据与Apache Iceberg表中的历史数据（通过AWS Glue Data Catalog管理）以及存储在Amazon S3和S3 Tables中的Parquet和Iceberg数据相结合。这些查询的处理完全在Amazon Aurora内部完成，无需额外的网络跳转或ETL管道，从而最大限度地减少了配置和资源。

该功能已在所有商业区域和AWS GovCloud（美国）提供，不收取额外费用，客户只需为其查询产生的增量Aurora计算资源和S3请求付费。