描述
LakeSail 是一个下一代数据与 AI 平台,完全采用 Rust 构建,相比传统的基于 JVM 的数据引擎提供了显著的性能提升。它被设计为 Apache Spark 的即插即用替代品,这意味着现有的 PySpark、Spark SQL、Delta Lake 和 Iceberg 代码可以原封不动地运行。这种零迁移成本的方法使数据团队只需进行一次配置更改,即可利用一个速度更快、成本效益更高的引擎。
该平台的核心创新在于其原生 Rust 运行时,消除了与 Java 虚拟机 (JVM) 相关的开销。这带来了即时启动时间、无垃圾回收暂停以及更少的内存调优需求。LakeSail 的无状态 Rust 运行时可高效扩展,甚至可以缩减至零,从而最大限度地降低闲置成本。它能在引擎速度下提供原生的 Python 性能,绕过了 Python 工作负载与基于 JVM 的系统交互时常产生的序列化开销。
LakeSail 在设计之初就考虑到了 Agentic 时代,并集成了 AI 功能。它配备了 MCP 服务器、动态 Python 工具和 Lakehouse 分支功能,构建了一个 AI Agent 可以运行的底层平台,并提供增强的沙盒、可观测性和可逆性。这与那些为旧架构添加 AI 功能的平台形成了对比。LakeSail 支持 Iceberg 和 Delta Lake 等开放格式,并与 Spark Connect 和 DataFusion 集成,确保了广泛的兼容性。
LakeSail 的价值主张非常明确:在无需重构现有数据管道的痛苦下,实现卓越的性能和成本节约。该平台承诺与基于 JVM 的 Spark 相比,查询速度提高 8 倍,基础设施成本降低 94%。它将批处理、流处理、即席 SQL 和 AI Agent 工作负载整合到一个引擎中,简化了数据架构。此外,LakeSail 消除了供应商锁定合同和最低消费要求,提供真正的自动缩减至零功能。
LakeSail 非常适合希望优化数据基础设施性能和成本的数据工程团队、AI/ML 工程师和数据科学家。对于那些在 Spark 生态系统中投入大量资金但又希望在不进行大量工程工作的情况下实现技术栈现代化的组织来说,它尤其有益。该平台以 Agent 为先的设计也使其成为开发和部署 AI 驱动型应用的团队的有力选择。
LakeSail的核心功能
原生 Rust 数据与 AI 运行时
Apache Spark 的即插即用替代品
完整的 Spark API 兼容性 (PySpark, Spark SQL, Delta Lake, Iceberg)
与 Spark 相比查询速度提高 8 倍
比基于 JVM 的 Spark 基础设施成本降低 94%
迁移无需重写代码
以 Agent 为先的架构,配备 MCP 服务器
可沙盒化、可观测、可逆的 Agent 操作
Lakehouse 分支功能
亚秒级冷启动
无 JVM 开销 (即时启动,无 GC 暂停)
可缩减至零的无状态 Rust 运行时
引擎速度下的原生 Python
支持开放格式 (Iceberg, Delta Lake)
与 Spark Connect 和 DataFusion 集成
如何使用 LakeSail?
配置:更新您的数据管道配置以指向 LakeSail。
连接:使用 Spark Connect 协议建立连接。
运行:执行您现有的 PySpark、Spark SQL、Delta Lake 和 Iceberg 代码。
观察:监控性能改进和成本降低。
集成 AI:利用以 Agent 为先的底层平台构建 AI 应用。
LakeSail的使用案例
- Spark 替代方案
- AI Agent 开发
- 数据工程
- 即席 SQL 查询
- Lakehouse 现代化
- 成本优化








