数据与存储
TECH STACK开发技术栈数据放哪、怎么查：事务型数据库、缓存与文档库、搜索与向量检索、以及把数据搬来搬去的数据处理与管道。
收录条目
68 条
按用途筛选，同类才可比
先按分类把范围缩到一类：关系型（事务）、缓存与文档、搜索与向量、数据处理与管道；同一类里再比形态与许可证。
分类
4 个
按用途分组
适用场景
技术选型
先定位，再比同类
数据日期
2026-10-27
核对到这一天
口径边界
只比同类
跨类不横向比
筛选与排序
显示 68 / 68 条数据与存储对照表
第 2 / 3 页 · 共 68 条| 名称 | 分类 | 形态 | 一句话定位 | 亮点 / 热度 | 许可证 | 详情 |
|---|---|---|---|---|---|---|
| Meilisearch Meilisearch · 搜索与向量 | 搜索与向量 | 全文搜索引擎 | 开箱即用的站内搜索服务 | 一个二进制就能起服务，索引与检索都走 HTTP，前端可直接做输入即搜；默认带错字容忍… | MIT | 查看详情 |
| Milvus / Zilliz Cloud hybrid · cloud、self-host | 搜索与向量 | 自建/混合 | Standard from $0/month on serverless with usage billing and a 30… | Zilliz Cloud Free: 5GB storage, 2.5M vCU… | Apache-2.0 | 查看详情 |
| MongoDB Atlas Vector Search managed · cloud | 搜索与向量 | 托管 | Flex clusters bill $0.011/hour and scale with load from $8 to a… | Free cluster (512MB storage), limited to… | Proprietary | 查看详情 |
| OpenSearch oss · cloud、self-host | 搜索与向量 | 自建/混合 | AWS OpenSearch Serverless bills OCU-hours plus storage. NextGen… | — | Apache-2.0 | 查看详情 |
| ParadeDB ParadeDB · 搜索与向量 | 搜索与向量 | PostgreSQL 检索扩展（BM25） | Postgres 里的 BM25 混合检索 | 以扩展形式装进现有 Postgres，索引与事务和业务表同库，省掉独立搜索引擎与同步… | AGPL-3.0 | 查看详情 |
| pgvector (Postgres) oss · cloud、self-host | 搜索与向量 | 自建/混合 | Pricing follows your Postgres host. Supabase Pro from $25/month.… | Same as your Postgres host (Supabase Fre… | PostgreSQL | 查看详情 |
| Pinecone managed · cloud | 搜索与向量 | 托管 | Builder is $20/month flat and includes 10GB storage, 5M write un… | Starter: 2GB storage, 5 indexes, 2M writ… | Proprietary | 查看详情 |
| Qdrant Cloud hybrid · cloud、self-host | 搜索与向量 | 自建/混合 | Standard tier billed on actual compute, memory, and storage usag… | Free forever single-node cluster: 0.5 vC… | Apache-2.0 | 查看详情 |
| Quickwit Quickwit, Inc. · 搜索与向量 | 搜索与向量 | 对象存储上的日志搜索引擎 | 直接查对象存储、免运维的日志检索 | 索引与数据都放对象存储，不用常驻大内存集群，冷数据查询成本明显下降；按时间分区并支持… | Apache-2.0 | 查看详情 |
| Turbopuffer managed · cloud | 搜索与向量 | 托管 | Usage-based with monthly minimums: Launch $16, Scale $256 (adds… | — | Proprietary | 查看详情 |
| Typesense Typesense · 搜索与向量 | 搜索与向量 | 全文搜索引擎（内存索引） | 主打低延迟的即时搜索与拼写纠错 | 索引常驻内存，查询延迟稳定在毫秒级，联想与纠错体验好；内建地理搜索、分组与按字段排序… | GPL-3.0 | 查看详情 |
| Vespa Cloud hybrid · cloud、self-host | 搜索与向量 | 自建/混合 | Usage-based on Vespa Cloud (compute + storage); rates are not pu… | Free trial | Apache-2.0 | 查看详情 |
| Weaviate Cloud hybrid · cloud、self-host | 搜索与向量 | 自建/混合 | Flex from $45/month pay-as-you-go on shared clusters (from $0.00… | Free plan: 100k objects, 1GB memory, 10G… | BSD-3-Clause (optional features under the Weaviate License) | 查看详情 |
| Airbyte Airbyte · 数据处理与管道 | 数据处理与管道 | 数据同步平台 | 开箱即用的数据同步与连接器平台 | 大量现成连接器覆盖数据库、SaaS 与文件源，配置完就能定期把数据搬到目的地；连接器… | ELv2 | 查看详情 |
| Apache Airflow Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 工作流编排调度 | 用 Python 代码定义与调度批处理任务 | DAG 用 Python 写，依赖、重试、回填与告警都能进版本管理；算子覆盖各家数据… | Apache-2.0 | 查看详情 |
| Apache Doris Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 实时分析型数据库 | 兼顾点查与批量分析的 MPP 数据库 | 一套系统同时接实时写入与批量导入，点查走索引、聚合走向量化执行，报表与看板能秒级返回… | Apache-2.0 | 查看详情 |
| Apache Flink Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 流批一体计算引擎 | 有状态、精确一次的流式计算引擎 | 流与批统一成一套 API，事件时间、水位线与状态后端都由框架管理，窗口聚合与 joi… | Apache-2.0 | 查看详情 |
| Apache Hive Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 数据仓库与元数据服务 | 把 SQL 跑在分布式存储上的数仓组件 | 用 SQL 管理存在分布式文件系统上的表，分区与桶的组织方式沿用多年；元数据服务被大… | Apache-2.0 | 查看详情 |
| Apache Hudi Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 湖仓增量表格式 | 支持增量更新与删除的湖仓表格式 | 在对象存储上补上更新与删除能力，写入可选实时与批量两种表类型；自带时间旅行与增量拉取… | Apache-2.0 | 查看详情 |
| Apache Iceberg Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 开放表格式（湖仓） | 给数据湖加表语义与快照的开放格式 | 用元数据文件描述表快照，支持 schema 演进、分区演进与时间旅行，多个引擎能读同… | Apache-2.0 | 查看详情 |
| Apache Kafka Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 分布式事件流平台 | 高吞吐、可回放的事件流与消息中枢 | 分区日志模型让同一份事件被多个下游各自消费、按位点重放；写入以顺序追加为主，吞吐远高… | Apache-2.0 | 查看详情 |
| Apache Pinot Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 实时 OLAP 查询服务 | 面向用户侧实时分析的 OLAP 存储 | 按列压缩存储并预建索引，高并发下也能做到毫秒级响应，适合直接给产品界面供数；支持流与… | Apache-2.0 | 查看详情 |
| Apache Polaris Apache 软件基金会 · 数据处理与管道 | 数据处理与管道 | 湖仓元数据目录 | 面向湖仓的开放表格式目录服务 | 给多套表格式提供统一的目录与权限入口，计算引擎通过标准接口发现表并申请临时凭证，凭据… | Apache-2.0 | 查看详情 |
| Dagster Dagster Labs · 数据处理与管道 | 数据处理与管道 | 数据编排平台 | 以资产为中心的数据编排平台 | 把表、文件与模型当成资产管理，血缘与产出关系直接写在代码里；调度、分区与回填都围绕资… | Apache-2.0 | 查看详情 |
| DataHub DataHub 项目（Acryl Data 发起） · 数据处理与管道 | 数据处理与管道 | 元数据与血缘目录平台 | 可搜索的元数据与血缘目录平台 | 把表、看板、作业与血缘收进一个可搜索目录，谁产出、谁在用一查就知道；支持推送与拉取两… | Apache-2.0 | 查看详情 |
| dbt dbt Labs · 数据处理与管道 | 数据处理与管道 | SQL 转换与建模工具 | 用 SQL 与版本管理做数仓转换层 | 每张表写成一个 select 模型，依赖由引用自动解析，编译期就能查出缺列与循环依赖… | Apache-2.0 | 查看详情 |
| Debezium Red Hat（Debezium 社区） · 数据处理与管道 | 数据处理与管道 | CDC 变更捕获 | 基于日志的数据库变更捕获工具 | 直接读数据库提交日志，把增删改按顺序变成事件流，对业务库几乎不增加查询压力；主流关系… | Apache-2.0 | 查看详情 |
| Delta Lake Delta Lake 项目（Linux 基金会） · 数据处理与管道 | 数据处理与管道 | 湖仓表格式 | 带事务日志的湖仓表格式 | 在对象存储上补一层事务日志，写入具备原子性与可回溯，读端能拿到一致快照；支持更新删除… | Apache-2.0 | 查看详情 |
| DuckDB DuckDB Labs · 数据处理与管道 | 数据处理与管道 | 嵌入式分析型数据库 | 单文件、进程内跑的分析型 SQL 引擎 | 一个库文件加一个进程，就能对 Parquet、CSV 与数据框做列式查询，向量化执行… | MIT | 查看详情 |
| Great Expectations Great Expectations · 数据处理与管道 | 数据处理与管道 | 数据质量校验框架 | 给数据管道加断言的可测性框架 | 把数据质量写成可执行断言，在管道关键节点校验空值、范围、分布与唯一性；结果能落成文档… | Apache-2.0 | 查看详情 |
数据说明
收录规模68 个条目分 4 类，同类之间才可比
资料口径各项目官方文档与代码仓库以官方文档与仓库为准，只做中文整理
数据日期2026-10-27核对到这一天，官方改动以官方为准
口径边界只比同类跨类场景不同，不可直接比价与打分
常见问题
关系库、缓存、搜索、向量库，要各挑一个吗？
按数据形态分：事务数据用关系库，热点与计数用缓存，全文与日志检索用搜索型或分析型库，语义检索用向量库。规模不大时，PostgreSQL 的扩展（pgvector、全文检索、JSONB）往往能顶替后三类，可以少维护一套系统。
向量库要单独部署，还是用 PostgreSQL 的向量扩展？
数据量在千万级向量以内、且已经在用 PostgreSQL 时，pgvector 往往够用，少一套运维；超过这个量级或要做大规模混合检索，再考虑专用向量库。
条目信息取自各项目官方仓库与文档；定位、优势与注意事项为中文归纳，数值不改写，仓库地址、许可证与版本以官方为准。
