Turbolite：基于S3的SQLite VFS冷查询优化方案

作者使用Rust开发了一个名为Turbolite的SQLite VFS，能够直接从Amazon S3提供冷查询服务，实现亚250毫秒的响应时间。该项目目前仍处于实验阶段，存在较多bug，可能引发数据损坏，因此不建议用于生产环境。Turbolite的设计灵感来源于Turbopuffer，旨在探索对象存储是否能成为支持云原生嵌入式数据库的高效存储方案。其核心思想是通过分析SQLite的B树结构，将相关页面打包为压缩的页面组，并维护一个清单文件作为页面位置的权威来源。当缓存未命中时，Turbolite利用可寻址的zstd帧和S3范围GET请求获取所需数据，避免下载整个对象。此外，Turbolite支持根据查询计划提前下载索引和大范围扫描所需的数据，优化访问顺序。用户可调整预取强度，对点查询和小JOIN采用保守策略，对扫描操作则更激进。页面按类型在S3中分组，B树页面优先加载，索引页面积极预取，数据页面按表存储。在EC2 + S3 Express环境下，Turbolite实现了冷点查询<100ms、冷JOIN查询<200ms、以及空缓存下扫描1.5GB数据库<600ms的性能表现。在普通S3/Tigris环境中性能略低。当前限制包括仅支持单写入源，且仍偏向系统实验，而非生产级基础设施。