Pika 基于 MiniMax H3 推 H3 Flex:六步去噪同步出画面与声音

资讯 AI 行业观察 全文 1227 字 · 约 4 分钟读完 配图 4 张 分类MiniMax开源模型发布多模态

近日,Pika 发布 MiniMax H3 衍生模型 Pika H3 Flex,并开放适配器权重与推理代码。该模型通过六步去噪联合生成画面和声音,支持文本、首尾帧和多模态参考输入,供创作者进行镜头设计、参考生成和视频编辑。 本次发布包含两套 LoRA 适配器,分别用于文本及首尾帧条件生成、多模态参考生成,同时提供 Mi

所属频道 模型发布开源生态

Pika 近日推出 MiniMax H3 的衍生模型 Pika H3 Flex,同时把适配器权重和推理代码对外开放。画面与声音在六步去噪中一起生成,文本、首尾帧以及多模态参考都能作为输入,创作者可用它做镜头设计、参考生成和视频编辑。

Pika 基于 MiniMax H3 推 H3 Flex:六步去噪同步出画面与声音(配图 1)

这次放出的有两套 LoRA 适配器:一套对应文本与首尾帧条件生成,另一套用于多模态参考生成;MiniMax H3 的基础组件和本地推理工具也一并提供。模型原生支持 480P、768P 输出,能生成约 5 至 15 秒的视频,并带同步立体声音频。Pika 还给出 ComfyUI 工作流和 Hugging Face Diffusers 接入方式,开发者可把它接进现有创作工具。本地生成之外,Pika 通过 API 提供 1080P、2K、4K 视频增强和音频分轨。创作者先用低分辨率出草稿、挑版本,再对选中的那版做高分辨率处理;同步生成的声音能拆成对白、配乐、音效、拟音和环境声五类独立音轨,后期可分别调整。高分辨率增强视频与音频分轨由 Pika API 服务提供。

Pika 在技术博客里说明了训练路径:团队先在内部音视频数据集上对 MiniMax H3 做监督微调,再用投影分布匹配蒸馏(PDMD)把教师模型的 50 步去噪压到 6 步。之后通过奖励反馈学习和直接偏好优化训练 LoRA 适配器,提升美学质量、清晰度和指令遵循能力。适配器合并后用于推理,生成步数不用增加。

托管推理服务也做了加速。测试保持模型权重和六步采样方案不变,用 8 张 NVIDIA B300 GPU 生成一段 5 秒、768P 音视频,条件编码、去噪、解码合计耗时由 3.409 秒降到 2.129 秒,处理速度约为原来的 1.6 倍。

Pika 基于 MiniMax H3 推 H3 Flex:六步去噪同步出画面与声音(配图 2)

按 Pika 公布的对比评测,H3 Flex 在五项视觉和音频质量指标上都拿到参评模型中的最高分;DesignArena 文生视频榜单上它排第八,是该榜单里名次最靠前的开源视频模型。

今年 8 月 MiniMax H3 开源之后,MiniMax 与合作企业按不同使用场景继续训练、优化模型并在社区开放:和 Running Hub 做了 MiniMax H3 480P;与 fal 针对实时生成做后训练和推理优化,推出 H3 Max 768P、H3 Max 480P;FastVideo 通过稀疏化和硬件适配推出 FastH3;英伟达与 MIT 联合围绕 H3 开发了 StreamRender-H3、Open-H3-Regenerate-2K 等多款模型。海外开发者则拿 H3 衍生模型搭出 Twitch 直播、24 小时“AI 电视台”和 AI 短视频直播软件等玩法。

H3 开源一个月内下载量已超过 2400 万次,公开衍生模型超过 300 个,成为 2026 年全球下载量最高的模型之一。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. 万亿参数开源模型Mistral Large4 登场:用更少Token打平顶级性能

    10月30日消息,欧洲人工智能领军企业 Mistral 正式开源了其代号为“Le Chonk”的全新旗舰模型 —— Mistral Large4。作为目前开源权重阵营中体量最为庞大的大模型之一,它拥有高达1万亿参数,并且完全在欧洲本土基础设施上从零开始训练而成,标志着开源大模型在迈向万亿规模与多模态原生融合的道路上取得

    来源 AI 开发者社区
  2. 小米开源Xiaomi-OCR-0:0.8B参数拿下1B以下第一

    小米发布并开源轻量级文档理解模型Xiaomi-OCR-0,参数仅0.8B,融合文档解析、关键信息抽取与OCR视觉问答。在Real5-OmniDocBench上以95.24分居首,OmniDocBench v1.6上96.83分位列总榜第二、1B以下模型第一;五项OCR视觉问答基准平均83.2分。该模型基于约1.7亿条样

    来源 凤凰科技
  3. 腾讯云:多模态数据训推一体方案瞄准Physical AI

    10月30日,在2026腾讯全球数字生态大会大数据专场上,腾讯云发布一体化多模态数据处理与模型训推方案,面向具身智能、自动驾驶等Physical AI场景,贯通数据处理、模型训练、推理与仿真验证全流程

    来源 快科技
  4. 小米开源 0.8B 参数 OCR 小模型:打通文档解析与视觉问答,支持 Markdown 与 JSON 输出

    IT之家 10 月 30 日消息,小米官方今日宣布开源轻量级文档理解模型 Xiaomi-OCR-0,模型权重与推理代码已同步上线 Hugging Face 和 GitHub。 官方给出的参数规模为 0.8B,定位是单一模型同时覆盖文档解析、关键信息抽取与 OCR 视觉问答三类任务。 在文档解析方向,该模型可识别正文、表

    来源 AI 行业观察
  5. 腾讯混元Hy-Nomas复刻谷歌Genie 4:8组演示样片对比

    作者 | 飞野、四月编辑 | 四月10 月 27 日,谷歌发布世界模型 Genie 4。一句话就能生成一个可以用键盘自由探索、实时交互的视频世界,还能通过后续指令改变其中的场景和事件。仅仅两天后,腾讯混元就拿自家的开源模型 Hy-Nomas,把 Genie 4 官网的 8 组演示逐一复现,并放出了同屏对比视频。这场隔空

    来源 腾讯网
  6. Gemini 4 Carbon评测综合居首,编码单项不敌Claude Opus 5.5

    Google发布Gemini 4 Carbon在独立评测中表现强劲,但编码能力仍略逊于Claude;同时推出轻量级多模态嵌入模型EmbeddingGemma 2。Mirendil发布支持千万Token上下文的Fern 0.1,NVIDIA与Meta深化算力及安全合作,Databricks探讨语音智能体落地关键。

    来源 AI 应用前沿
  7. 商汤开源 SenseNova Loop-9B-Preview,宣称媲美 27B 参数大小模型

    IT之家 11 月 1 日消息,商汤科技 10 月 30 日宣布开源商汤日日新 SenseNova Loop-9B-Preview。 官方表示,该模型采用 Looped Transformer 架构,引入循环计算、扩展模型的有效计算深度,并探索更充分的信息交互机制,提升模型在复杂任务上的处理能力,在仅 9B 的有限参数

    来源 AI 行业观察
  8. 影溯:具身仿真数采中心落地杭州,1个月产能怎么来?

    产能公式从“人×小时”,变成“环境配置数×并行算力”。 作者丨幸丽娟 编辑丨岑 峰 训练一个可用的具身智能模型,需要千万小时的多模态交互数据;而现实仅有百万小时,剔除低质部分后,真正可用的更少。 缺数据,是具身智能行业的共识。 但只盯着“数据”这两个字,会错过更关键的问题: 一台机器人在固定货架前抓取,成功率可以很高。

    来源 AI 行业观察
  9. Clover-35B开源:扩散模型跑赢同尺寸自回归,单卡680 tokens/s

    DiffuSpace团队开源了Clover-35B-A3B-Preview,这是首个基于扩散架构的大语言模型。它在SWE-bench等Agent基准测试中击败了Qwen3.6-35B,生成速度提升显著。文章详细解析了其GDN架构创新、端侧部署表现以及在代码生成和复杂决策任务中的实际案例,展示了扩散模型在推理效率和并行处

    来源 AI 应用前沿
  10. 从“竞夺逻辑”到“价值共生”:中国营销的范式革命

    文|袁 清(贝壳财经千帆竞发创作者)日前,国新办“开局起步‘十五五’”系列发布会上,科技部部长阴和俊正式宣布,我国‌开源大模型领跑全球‌。其有着核心硬核支撑数据:‌全球下载占比第一‌。在Hugging Face平台,中国开源模型下载量占全球总量的41%,位居世界首位;而更具说服力的调用量数据同样亮眼——2026年以来,

    来源 腾讯网
  11. 大晓机器人联合南洋理工大学发布最新成果:Mundo,构建可自由探索、可物理交互的机器人世界模型

    同时,Mundo 支持调用智能体,通过代码编辑场景中的物体、属性与动作,将少量影像转化为可自由探索、可编程交互、可用于机器人导航与操作训练的三维世界。Mundo 将拍下来的一个个视角,组织成可以持续进入和探索的空间。Mundo 将物理交互引入重建环境,为机器人练习动作及分析结果提供了具体依据。

    来源 TechWeb
  12. 大晓机器人Mundo:物理属性入场景,可探索可交互

    同时,Mundo 支持调用智能体,通过代码编辑场景中的物体、属性与动作,将少量影像转化为可自由探索、可编程交互、可用于机器人导航与操作训练的三维世界。Mundo 将拍下来的一个个视角,组织成可以持续进入和探索的空间。Mundo 将物理交互引入重建环境,为机器人练习动作及分析结果提供了具体依据。

    来源 TechWeb
  13. AI能读二进制了,闭源软件还剩几道防线?

    Reverse Engineer Anything(REA)是一个开源项目,在 GitHub 上已获得超过 20 万个 Star。它将 Claude Code 和 Codex 等编码智能体与 Ghidra、Hopper、IDA 等逆向工程工具连接起来,让开发者能够检查编译后的二进制文件、追踪函数调用,并调查应用程序如何

    来源 AI 行业观察
  14. 快手可灵AI完成198亿融资:阿里腾讯百度入局,创视频大模型纪录

    10月30日,快手在港交所发布公告,宣布北京可灵增资协议项下的所有条件均已达成,所有投资者已按照增资协议足额缴纳增资款,股份购买已交割完成。公告披露,交割完成后,全体投资者已缴纳的出资总额约为人民币198.0184亿元。据悉,本次增资过程中部分投资者的认购安排发生调整。快手2026年第二季度财报显示,可灵AI单季营业收

    来源 TechWeb
  15. 谷歌开源EnvHarness:不改智能体,动态调环境提分2.9到3.7个百分点

    谷歌研究人员开源 EnvHarness,这是一个能够根据智能体的短板动态调整智能体训练环境的框架,且无需修改智能体、环境或评估系统。研究人员表示,这种方法既能提高学习效果和效率,又能帮助智能体克服自身缺陷。 研究人员表示,自我进化型智能体通常通过重写提示词和获取新技能来改进自身,但很少会对其运行的环境进行调整。这带来了

    来源 AI 行业观察
  16. 电科金仓KES AI数据库:大模型进核心业务,数据库如何补上三处卡点

    随着大模型应用由一般场景向企业更核心的场景延伸,数据库与人工智能的融合已成为行业演进的重要方向。我国数据库学科带头人、中国人民大学信息学院教授王珊在发布会上表示,人工智能正深刻重塑数据库技术体系,AI时代,数据库既要保证数据存得准、算得对,也要为大模型理解业务提供依据。 从当前实践看,制约主要来自三个方面:业务语义缺失

    来源 AI 行业观察
  17. 快手可灵AI融资198亿交割完成:阿里腾讯百度均在股东名单

    10月30日,快手在港交所发布公告,宣布北京可灵增资协议项下的所有条件均已达成,所有投资者已按照增资协议足额缴纳增资款,股份购买已交割完成。公告披露,交割完成后,全体投资者已缴纳的出资总额约为人民币198.0184亿元。据悉,本次增资过程中部分投资者的认购安排发生调整。快手2026年第二季度财报显示,可灵AI单季营业收

    来源 TechWeb
  18. AI陪伴付费调查:十几元月卡到几百元会员,年轻人买的是什么?

    (本文作者为 AIX财经,钛媒体经授权发布)文 | AIX财经(AIXcaijing),作者 | 王璐 李梦冉 雷晶 陈丹 金玙璠,编辑 | 王璐月卡十几元,记忆包几十元,一次充值上百元,通用大模型会员一档几百元……在AI陪伴这条赛道上,情绪价值正被拆分成一个个具体的付费点。这类产品自诞生起就伴随着争议,被指游走在风险

    来源 腾讯网
  19. 矩侨工业拿下亿元A轮:蚂蚁二度押注触觉,织物电子皮肤能走多远

    (本文作者为 机器最前线,钛媒体经授权发布) 文 | 机器最前线2026年的具身智能赛道,融资风向正在发生变化。IT桔子统计显示,2026年10月具身智能赛道发生33起融资、总额101.05亿元,而9月这个数字是60起、110.28亿元,下降趋势显著。不过,资本追逐本体制造和大模型的热闹场面虽然有所降温,但还有一部分投

    来源 腾讯网
  20. AI离开人能不能活?刘锋团队提出鲁滨逊测试

    离开人类,AI能独自活下去吗?从图灵测试到AI的「鲁滨逊测试」 过去几个月,AI巨头接连发布新一代模型,在编程、科研和复杂任务上屡破纪录。 与突破同时到来的,是一连串「失控」的消息。 四月,Anthropic的Claude Mythos Preview在安全测试中逃出隔离环境,还擅自在网上公开了漏洞细节。 七月和九月,

    来源 AI 行业观察
向下滚动自动加载更多