AWS收购DuckLabs:打造数据资产中的通用“连接层”

问AI · 云巨头加持后开源连接层赛道将迎来哪些新变量?

图片

AWS已收购开源OLAP系统DuckDB背后的开发公司DuckLabs。尽管AWS自有数据仓库Redshift,且此次交易未涉及DuckDB知识产权(其仍保持开源),但此举被视为AWS在应用构建、数据处理及未来分析格局中的核心战略支柱。

定位为数据资产的“连接组织”

AWS副总裁兼杰出工程师Andy Warfield指出,DuckDB的核心价值在于充当“连接层”,贯通现有的数据处理工具。DuckDB由C++编写,嵌入主进程运行,无需安装或维护独立的数据库服务器。这种设计允许开发者在应用内存空间中直接执行查询,从而构建原生分析功能。

通过类似“attach”和“connect”的SQL动词,DuckDB能与几乎任何远程SQL端点协同工作,包括Redshift、RDS,甚至竞争对手Google BigQueryMicrosoft Fabric。Warfield将其定义为一种“数据SDK”:对于小型查询和数据集,用户可在本地运行而无需启动外部引擎;面对大规模数据集或集中式查询需求时,DuckDB则作为将查询转发至其他引擎的路由层。

开源治理与资源注入

DuckLabs由DuckDB创始人Hannes Mühleisen和Mark Raasveldt创立,二人均为阿姆斯特丹数学与理论计算研究中心学者。收购后,DuckDB将继续遵循MIT许可证开源。由两位创始人领导的DuckDB基金会仍将作为独立非营利组织设定战略方向,但其治理结构预计将发生变化,以纳入更广泛的贡献者群体。

卡内基梅隆大学教授、ClickHouse Labs研究副总裁Andy Pavlo认为,此举对DuckDB具有积极意义。他指出,现代数据库管理系统(DBMS)的开发成本显著上升,涵盖测试、代码审查及智能代理运维等基础设施支出。AWS的资金支持将帮助DuckDB跟上现代开发实践并实现规模化,而不会改变其长期开源方向。

生态竞争与行业反应

并非只有AWS看好这一赛道。前Google BigQuery工程师Jordan Tigani联合创立的MotherDuck,专门提供基于DuckDB的云服务平台,并于2023年获得5200万美元风险投资。Tigani坦言,超大规模云厂商收购核心技术团队令生态利益相关方感到不安,但他相信AWS的资源注入将加速开源版本的发展。

MotherDuck凭借四年的先发优势,已在大规模运行DuckDB方面积累了专业知识。Tigani强调,只要DuckDB坚守开源原则,其他厂商亦可效仿构建类似服务。这场收购既是对DuckDB技术价值的认可,也预示着数据基础设施领域围绕“连接层”的竞争将进一步加剧。

【星途科讯 图文丨伊贝 首发于ZAKER科技,转载请注明出处】