号称行业首个具身全模态端到端交互大模型,智元发布 WITA-Omni

资讯 AI 行业观察 全文 993 字 · 约 3 分钟读完 配图 1 张 分类模型发布多模态大模型

IT之家 11 月 10 日消息,“智元 AGIBOT”公众号今天(10 日)晚间发文宣布,智元正式发布 WITA-Omni(硅光动语全模态大模型)。 根据官方介绍,该模型也是行业首个具身全模态端到端交互大模型。WITA-Omni 基于机器人本体感知数据深度训练,除了音视频输入输出,还新增支持触觉、本体状态等输入,以及

所属频道 模型发布

智元 AGIBOT 公众号在 11 月 10 日晚间发布消息,WITA-Omni(硅光动语全模态大模型)正式亮相。

官方称,这是行业首个具身全模态端到端交互大模型。该模型以机器人本体感知数据为基础做了深度训练,除音视频输入输出外,新增触觉、本体状态等输入,以及机器人动作、表情等输出。按官方的说法,机器人由此第一次有了为物理世界而生的“交互大脑”。

架构上,WITA-Omni 采用流式全双工,能边听、边想、边应、边动、边做表情,传统串行处理中的等待被削减。交互响应最快约 400 毫秒,平均约 600 毫秒,比业内平均水平快近 3 倍。

全模态拒识的加入,让机器人交互不必再用唤醒词,全程自然对话。系统会综合对话朝向、视频、音频、声纹、唇动、姿态、语义和上下文,判断当前发言要不要回应。多人交谈或环境广播等干扰下,误触发大幅减少,机器人更懂“看场合”。

图片

语言方面,WITA-Omni 支持上百种语言和方言免切换自由交流。配合全双工架构,流式同声传译(语言传译和方言传译)以及双向互译都能实现。

情感表现也更接近人。倾听时,机器人用细腻表情和自然头部动作给出回应;表达时,参数化面部表情、有感染力的声音与协调肢体动作配合,把开心、惊讶、激动、悲伤、满意、痛哭、认真与自信等几十种情绪生动呈现出来。每种情绪还有不同强度——同样是开心,可以浅浅一笑,也可以开怀大笑,对话因此更真实、更有温度。

除了能说、能看、能动,WITA-Omni 还能画。比如讲一个复杂产品,或给孩子讲科普小知识,它会自行判断,把一言难尽的内容实时显示在面部屏幕上,让用户一目了然。

它还能持续感知周围环境、用户状态及其变化,自主思考、决策并行动,在合适时机主动发起互动。官方宣称机器人也能有自己的“小心思”:见到贵宾主动欢迎、伸手握手;收到点赞开心回应;看到用户挥手告别,立刻挥手相送。

据IT之家此前报道,今年 7 月,WITA-Omni Preview 模型以 85.21 分综合成绩登顶 DailyOmni 全模态理解榜单,超过千问、Gemini、豆包、英伟达等国内外领先模型,八项细分指标中六项排第一。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关 AI 工具

AI 导航
腾讯混元大模型 腾讯混元大模型由腾讯全链路自研,在文本和多模态模型性能方面表现卓越,处于业界领先水平。其混元 API 整合了… 大模型与开发平台 · tencent.com 快手可图大模型Kolors 可图大模型(Kolors)是快手大模型团队自研打造的文生图AI大模型,能够根据用户的文字输入生成风格多样、画… AI 绘画生图 · kuaishou.com 盘古大模型 华为盘古ai大模型官网入口,1100亿密集参数,40TB海量数据精细训练而成 简介 盘古NLP大模型是一项基… 大模型与开发平台 · huaweicloud.com OpenAI最新发布的多模态AI大模型 GPT - 4o是OpenAI最新推出的先进人工智能模型。它具备强大的多模态推理能力,能处理语音、文本和视觉… AI 写作 · openai.com 多模态跨尺度生物医学成像 以亚纳米分辨光电融合技术为代表的多模态高分辨分子成像装置、以毫秒分辨显纳成像为代表的多模态活体细胞成像装置、… 知识管理 · bjmu.edu.cn 深思考Dongni多模态大模型 Dongni多模态大模型搜索引擎通过结合文本、图像等多模态数据,为用户提供了一个功能强大、操作简便的搜索工具 大模型与开发平台 · dongni.ai BlueLM蓝心大模型 蓝心大模型官网,vivolm,vivo自研的通用大模型 简介 蓝心大模型(BlueLM ),强大的语言理解能… 聊天对话 · vivo.com 云知声山海大模型 云知声山海大模型是一个多功能、跨领域的智能大模型,它通过集成丰富的知识库和先进的自然语言处理技术,为用户提供… 大模型与开发平台 · unisound.com

相关推荐 按相关度与热度排序

全部资讯 →
  1. 蚂蚁灵波开源LingBot-Touch:触觉基础模型让机器人摸得更灵敏

    【TechWeb】11月10日消息,蚂蚁灵波科技开源触觉基础模型LingBot-Touch,为机器人大脑补齐关键的触觉感知能力。该模型基于近5000小时真实触觉数据预训练,覆盖磁触觉、视触觉和压阻式三类主流传感原理,可将不同信号转化为同一套触觉表征,供不同灵巧手和动作模型使用,让机器人在“看得清楚、想得明白”的同时,进

    来源 腾讯网
  2. Meta专用模型登陆Muse与Meta AI:个人超级智能指数跃升

    人工智能领域的竞争正加速向深度交互与任务执行的长效能力挺进。11月6日,Meta 官方发布最新研究公告,宣布正式将基于前沿大模型 Muse Wonder 训练的系列专用模型推向Muse与Meta AI的广大用户,全面赋能日常对话与复杂任务处理。 核心能力飞跃:个人超级智能指数大幅提升 此次推出的专用模型继承了Muse

    来源 AI 开发者社区
  3. Qwen4跑分首超Opus5.5:Flash拿49.9分,成本仅0.4美元

    11月8日消息,随着新一轮国产 AI 大模型密集进入发布倒计时,阿里旗下千问 Qwen4系列的核心跑分数据近日抢先曝光。在面向游戏开发的专项创造力评测中,该系列部分型号成功超越了海外顶尖的 Opus5.5,展现出令人瞩目的技术追赶速度。 游戏开发创造力基准跑分曝光:Flash 成功超越 Opus5.5 此次曝光的评测基

    来源 AI 开发者社区
  4. 蚂蚁灵波LingBot-Touch开源:近5000小时触觉数据,26项真机测试

    IT之家 11 月 10 日消息,今日,蚂蚁灵波科技开源触觉基础模型 LingBot-Touch,为机器人大脑补齐关键的触觉感知能力。 IT之家从官方介绍获悉,基于近 5000 小时真实触觉数据预训练,LingBot-Touch 覆盖磁触觉、视触觉和压阻式三类主流传感原理,可将不同信号转化为同一套触觉表征,让积累的“手

    来源 AI 行业观察
  5. 英伟达GR00T 2:5次示范达95%,产线验证启动

    2026年11月9日,英伟达在CoRL 2026大会发布GR00T 2机器人世界行动模型,五次任务示范后在50项评测任务上成功率达95%,零示范条件下可完成其中40项。富士康用于服务器制造、西门子评估工业场景、Nexuni测试洗衣操作,标志着通用机器人基础模型首次进入多家企业产线验证阶段。同步发布Isaac Lab 3

    来源 AI 科技快讯
  6. 腾讯优图DSpine开源:并行草稿逐层接力,SGLang吞吐最高提升4.01倍

    在大型语言模型(LLM)的无损推理加速中,推测解码(Speculative Decoding)已成为工业界标配。以 EAGLE-3 为代表的自回归草稿模型虽然预测准,但每多猜一个 token 就要多跑一步串行前向;而受扩散语言模型启发的 DFlash 将草稿生成彻底并行化 —— 一次骨干网络前向即可同时吐出整块候选 t

    来源 腾讯网
  7. Agent领导力大考!Einsia AI发布WorkflowArena,行业首个多智能体编排基准

    机器之心发布智能体正从单打独斗走向多智能体协同。如今的 Claude Code、Codex 等框架,已经允许模型在运行时自己拉起子智能体,甚至直接写出调度它们的可执行工作流:任务怎么拆、每个子智能体拿到什么上下文、中间结果在哪里校验、最后如何整合。过去由工程师预先设计好的多智能体结构,正在交给模型自己临场决定。这意味着

    来源 腾讯网
  8. 字节跳动发布Seedream 5.5图像模型:支持百轮编辑,直出透明背景

    IT之家 11 月 9 日消息,字节跳动 Seed 团队今日发布了新一代图像创作模型 Seedream 5.5,重点带来三项核心能力升级: 更稳定的多轮编辑:实现非编辑区域的像素级保持,消除色彩偏移,降低连续修改中的细节丢失与画质衰减,支持围绕同一作品展开多达 100 轮的持续创作。 原生 RGBA 透明素材生成:直接

    来源 AI 行业观察
  9. 小米联合北大发布物联网设备模型白皮书,开放11.6亿台AIoT设备经验

    IT之家 11 月 10 日消息,小米技术官方微博今日宣布,在 2026 CCF 中国软件大会现场,由中国计算机学会(CCF)泛在操作系统开放社区牵头,小米科技联合北京大学编写的《物联网设备模型(Thing Model)技术白皮书》正式发布。 据介绍,物模型是智能设备的“数字化通用语言”。结合小米超 11.6 亿台 A

    来源 AI 行业观察
  10. 智元彭志辉回应机器人量产:一年几万台产能有,关键看客户买不买

    本文来源:时代周报 作者:朱成呈面对一个陌生的物体,一台机械臂只需听懂一句话,就能完成抓取、移动和放置。以前,这是机器人公司花费大量时间训练才能达成的能力。如今,通用大模型也能帮助机械臂做到这一点。OpenAI发布GPT-6 Astra后,一系列机械臂操作视频流传社交网络。模型无需针对具体任务进行额外训练,就能理解指.

    来源 腾讯网
  11. 美团开源万亿参数模型,百度ERNIE Evolve实现自动化研发

    2026年11月AI圈动态:美团开源1.6万亿参数多模态模型LongCat-2.5,支持百万上下文;百度发布自动化研究系统ERNIE Evolve,GPU推理吞吐提升33.7%;Google扩展第八代TPU产品线并推出配套软件栈;NVIDIA发布机器人动作模型GR00T 2。此外,研究发现智能体约18%输出Token可

    来源 AI 应用前沿
  12. 蚂蚁灵波LingBot-Touch开源:5000小时触觉数据预训练

    蚂蚁灵波科技开源触觉基础模型 LingBot-Touch,基于近 5000 小时真实触觉数据预训练,覆盖磁触觉、视触觉和压阻式三类传感器。26 项真机测试显示,接入后动作模型任务成功率提升 14 至 26 个百分点,让机器人“摸得更灵敏”。#机器人触觉##具身智能#

    来源 IT之家
  13. Sharpa Wave触觉传感器:加装后成功率为何从39%跌到15%?

    蚂蚁灵波开源触觉预训练基础模型LingBot-Touch,通过"统一坐标+分入口+共享主干+特征空间预测"架构,将磁触觉、视触觉、压阻式触觉三类传感器信号统一编码为触觉Token。实测显示,接入后机器人成功率平均提升20+百分点,且对从未出现在训练数据中的新传感器同样有效。代码与权重已全部开源。

    来源 华尔街见闻
  14. 消融者拆AI护栏:一台消费级显卡就能让模型有求必应

    一群被称为“消融者”的技术人员正在互联网上大量发布移除了安全限制的AI模型,这些模型对用户的任何请求都照单全收。支持者称这能推动安全研究与网络防御,批评者则警告同样的工具也可能被用来制造炸弹等恶意用途。一场围绕AI护栏的攻防战正在开源社区悄然上演。

    来源 AI 行业观察
  15. 字节Seedream 5.5实测:iPhone Duo界面改成磁带机,18轮不崩

    用 AI 生成一张漂亮的海报,可能只需要几十秒,但想让它达到真正能交付的标准,麻烦才刚刚开始。改个产品颜色,背景跟着变了;调整一句文案,人物五官却走样了;想把素材单独抠出来复用,还得重新折腾一遍。AI 越来越擅长画图,却还没完全学会像 Photoshop 一样精准改图。就在刚刚,字节跳动发布新一代图像创作模型 Seed

    来源 腾讯网
  16. 腾讯鹅次元开启元气首测:AI游戏陪伴Agent能走多远?

    10月21日,腾讯在全网公布了旗下AI游戏陪伴Agent【鹅次元】开启招募测试的消息。 而在近日,【鹅次元】开启了“元气首测”,具体情况如何,腾讯为何会入局AI陪伴这一赛道,DataEye研究院对此进行剖析。 鹅次元是什么 【鹅次元】是腾讯首款面向端游市场的AI游戏陪伴Agent,谐音“二次元”,主打懂游戏,更懂你,以

    来源 AI 行业观察
  17. 字节跳动发布Seedream 5.5:生成提速,单张成本0.28元

    11 月 9 日,字节跳动正式发布豆包图像创作模型 Seedream 5.5。相较上一代 Seedream 5.0 Pro,新模型的生成速度大幅提升,同时增强了多轮编辑稳定性,原生支持透明素材生成,并针对图像真实感和小字渲染方面做了重点优化,更好地满足了专业创作场景对质量、稳定性与效率的要求。 目前,豆包、豆包工作、即

    来源 AI 行业观察
  18. AI Agent文件任务:交付可靠性成新难点

    (本文作者为 科技新星球,钛媒体经授权发布)文 | 科技新星球过去一段时间,AI产品的能力竞争主要围绕模型展开:参数规模、推理能力、上下文长度,以及生成文本和代码的质量。但当AI进入实际工作流程,评价标准正在发生变化。用户不再只问AI能不能写一段Python代码,而是会提出更具体的要求:把一个目录里的表格整理好,提..

    来源 腾讯网
  19. Meta发布Muse Ember:每百万token 10美分,Agent执行成本战开打

    Meta于11月10日发布轻量级模型Muse Ember,专为Agent执行场景设计,输入定价仅为每百万token 10美分,明显低于Haiku、Luna等前沿竞品。分析认为,这标志着大模型竞争正从能力竞赛转向执行成本竞赛,低价轻量模型或成为Agent规模化落地的关键基础设施,也将给同行带来新的定价压力。

    来源 AI 科技快讯
  20. 豆包接入Seedream 5.5:图片设计升级,支持100轮连续编辑

    豆包官方今日宣布,豆包图片设计能力升级,正式接入全新图像创作模型 Seedream 5.5。字节跳动 Seed 团队昨日正式发布了新一代图像创作模型 Seedream 5.5,重点带来三项核心能力升级:更稳定的多轮编辑、原生 RGBA 透明素材生成、质感更自然文字更清晰。#豆包# #Seedream5.5#

    来源 IT之家
  21. Meta推Muse Ember:性能持平Claude 5.5,单次成本仅1/3

    人工智能领域的性价比军备竞赛再度迎来重量级选手。11月9日,Meta 官方正式发布了旗下迄今为止规模最小、运行效率最高的轻量级人工智能模型——Muse Ember。 定位高频任务:以极致效率满足智能体高强度运转 作为一款主打高效轻量的核心产品,Meta 将 Muse Ember 的应用场景精确锁定了人工智能智能体(Ag

    来源 AI 开发者社区
  22. AI抢走手游用户?养鱼、Vibe Coding正分走时间与金钱

    前一阵葡萄君看到个帖子,楼主说:现在比起给手游氪金,还不如订阅 AI 做开发给的正反馈强。当时我就在想:这一天终究还是来了。 其实自从御三家开始推出订阅制,并且各种卷新版本之后,AI 圈就有过这样一种调侃:AI 大模型本质上是一种二游啊!你看这大小月卡、版更节奏和粉丝对线,不全对上了? 当时大家说这话,基本还是在玩梗,

    来源 AI 行业观察
向下滚动自动加载更多