多源数据接入
可采集 S3、Google Cloud Storage、Azure Data Lake Storage 或任意兼容 S3 对象存储上的 Parquet、JSON、CSV、XML 与二进制文件,也支持 Oracle、PostgreSQL、MySQL、SQL Server、MongoDB、DynamoDB 等库的 CDC 变更流。
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
Onehouse 由 Apache Hudi 与 Apache XTable 的原班团队打造,把摄入、转换与服务放在同一个平台上。平台可部署在用户自己的 VPC 或任意 Kubernetes 集群,支持按量付费或包年。存储层同时兼容 Apache Hudi、Apache Iceberg 和 Delta Lake,并可借 Apache XTable 在三种表格式之间任意转换。生产数据方面,单个客户每天摄入 350+ TB,每月 800K+ 次作业运行,作业成功率 99%。它更适合已有云上数据基础设施的团队,入门门槛不在价格,而在能否接受数据湖这套架构与运维方式。
Onehouse 是一套通用数据湖屋平台,创建者来自 Uber、LinkedIn 和 Confluent,也是 Apache Hudi 和 Apache XTable 的作者。它面向需要在多云、多引擎之间保持数据开放、避免被单一厂商锁定的数据工程与 AI/ML 团队。
平台覆盖完整链路:采集端支持对象存储上的 Parquet、JSON、CSV、XML 与二进制文件,支持 Oracle、PostgreSQL、MySQL、SQL Server、MongoDB、DynamoDB 等数据库的 CDC 变更流,也支持 Kafka、Confluent Cloud、Amazon MSK、Redpanda、Pulsar 的持续流读取;转换端提供 SQL、Spark、Scala、PySpark 作业;服务端由 Lakegres 提供与 Postgres 兼容的分析与 AI 服务入口,Quanton 引擎负责 SQL 与 Spark ETL。
部署上,平台可以装在用户自己的 VPC、自管 Kubernetes(含本地集群),或 Amazon EKS、Google GKE、Azure AKS 等托管 Kubernetes,也可运行在 Nebius、CoreWeave、Nscale、DigitalOcean、Crusoe 这类 NeoCloud 上。数据始终以开放格式存放在用户自己的存储桶里,OneSync 负责在 Glue、Unity、Snowflake 和 Hive 之间同步表元数据与访问权限。
可采集 S3、Google Cloud Storage、Azure Data Lake Storage 或任意兼容 S3 对象存储上的 Parquet、JSON、CSV、XML 与二进制文件,也支持 Oracle、PostgreSQL、MySQL、SQL Server、MongoDB、DynamoDB 等库的 CDC 变更流。
端到端增量执行,每次只读写发生变化的数据,成本与新增数据量挂钩而不是整表规模;托管 CDC、流与文件摄入,按新鲜度目标做延迟感知调度。
在用户自己的存储桶中同时管理 Apache Hudi、Apache Iceberg 和 Delta Lake 三种表格式,借助 Apache XTable 在任意方向之间转换;Table Optimizer 持续执行 compaction、聚类、清理与文件大小调整。
运行 SQL 与 Spark ETL,据比开源 Spark 快 5 倍、成本低 75%,并可与 Databricks Photon 在真实 ETL 场景下持平或更快;现有作业无需重写即可切换。
自动扩缩容器可在数分钟内完成集群规格调整,而 Spark 默认需要 30-40;多路复用调度把多个作业打包到共享集群,并优先使用 spot 与 Graviton 实例;列式向量化合并降低云请求成本。
提供与 Postgres 兼容的分析与 AI 上下文服务端点,数据直接来自开放表格式;在真实生产环境中比 AWS Athena 快 2-10 倍。
同时在 Glue、Unity、Snowflake 和 Hive 之间保持表元数据与访问权限一致,并覆盖所有表格式,使引擎、格式和云之间的体验保持统一。
当你要把湖仓架构放进自己的云账号、并且不愿被某一家厂商锁定格式与目录时,Onehouse 值得认真评估——三种开放表格式任意转换、OneSync 同步 Glue/Unity/Snowflake/Hive,这套组合在同类里不常见。已经有 Spark 作业的团队可以先用免费的 Cost Analyzer 验证 Quanton 的提速与降本,再决定是否切换。但如果你没有自管 Kubernetes 或云账号运维能力,部署与维护成本会比直接用托管服务高;数据量不大、作业不多时,平台提供的增量能力也换不回相应的复杂度。
需要数据同时存在于多个云、又要避免被单一厂商锁定的团队,可以用 OneSync 在 Glue、Unity、Snowflake、Hive 之间统一元数据与权限。
现有 SQL、Spark、Scala、PySpark 作业无需重写即可指向 Quanton 引擎,改造量小、验证路径清晰,适合先小范围试跑。
可直接从开放表格式取数供 AI/ML 平台与向量数据库使用,减少为模型训练单独搭一套数据管道的工作。
平台装在自管 VPC 或 Kubernetes 上,缺少云账号与集群运维能力时部署与维护成本会明显上升,需谨慎评估。
如果只使用 Hudi、Iceberg 或 Delta Lake 其中一种,且没有跨引擎、跨云需求,平台的多格式转换优势基本用不上。
| 指标 | 数值 | 数据来源 |
|---|---|---|
| 单客户每日摄入量 | 350+ TB | Onehouse 官网 |
| 每月作业运行次数 | 800K+ | Onehouse 官网 |
| 生产环境作业成功率 | 99% | Onehouse 官网 |
| Quanton 引擎相较开源 Spark 提速 | 5x | Onehouse 官网 |
| Quanton 引擎相较开源 Spark 降本 | 75% | Onehouse 官网 |
| Lakegres 相较 AWS Athena 提速 | 2-10x | Onehouse 官网 |
| 文档访问申请通过后赠送额度 | $1,000 | Onehouse 官网文档访问页 |
官网说明可以按量付费,也可以选择固定年费。申请文档访问并通过审批后,会额外解锁 $1,000 免费额度,可用于第一轮试用。未公开具体的档位价格与计费单价,实际费用需向官方确认。
Hudi 是 Onehouse 团队参与创建的表格式,而 Onehouse 把摄入、转换、存储优化和服务层包装成一个平台,内置 OneFlow 增量摄入、Quanton 引擎、Lakegres 服务层和 Table Optimizer,并同时兼容 Hudi、Iceberg 和 Delta Lake,不需要自己把这些组件拼起来。
可以。平台支持部署在用户自己的 VPC,也可以运行在 Amazon EKS、Google GKE、Azure AKS 等托管 Kubernetes、自管 Kubernetes(包括本地集群),或 Nebius、CoreWeave、Nscale、DigitalOcean、Crusoe 这类 NeoCloud 上。数据存放在用户自己的存储桶里。
现有作业可以重新指向 Quanton 引擎,无需重写,并提供一个免费的 Apache Spark Cost Analyzer,让你先用真实作业算出提速与降本幅度。其比开源 Spark 快 5 倍、成本低 75%,并与 Databricks Photon 在真实 ETL 场景下持平或更快。