周畅庞天宇相继离职,大厂对多模态生成态度生变

资讯 凤凰科技 作者:字母榜 全文 4108 字 · 约 11 分钟读完 配图 4 张 分类人事变动多模态智能体

多模态生成退潮,大厂转向Agent主线

所属频道 模型发布智能体与 Agent人物与组织

梁文锋有过一句表态:“视频生成、3D生成、世界模型,跟智能主线没有太大关系,我们不会去做。”

放在当时,这话与行业风向正好拧着。2026年上半年,多模态生成还是AI大厂的主线,部门独立、产品线独立、负责人也独立。

腾讯那边,大语言模型部与多模态模型部平级并存,图像、视频与3D生成由后者单独管;字节的视觉生成业务,包括多模态交互、世界模型、Seedream与Seedance,再加上机器人团队,统一向周畅汇报;阿里则在4月发布了基于原生多模态架构的世界模型。

那阵子,多模态生成被看成“AI企业资金的共识出口”,大厂们纷纷把它当作新的AI叙事。

可最近一周之内,两条消息接连传出来。

10月31日,据Z Finance报道,字节Seed核心负责人周畅已经离职创业,方向是Physical AI,并拿到头部美元基金支持。11月2日,多家信源称,腾讯混元首席研究科学家、多模态强化学习负责人庞天宇离职,在职不足9个月。

人才流失的背后,是大厂对多模态生成的态度在变。Agent等方向跑得快,算力和预算就被挪到了这些看得见增长的业务上。

按现在的叙事,多模态生成更像“期权型业务”:大厂掏点小钱,赢了上不封顶,输了立刻撤退,把本金收回来。

周畅庞天宇相继离职,大厂对多模态生成态度生变(配图 1)

多模态生成是期权型业务?

多模态这行当,烧token烧得厉害。

单说图片,模型要理解它,先得把图切成一块块小图像块。

一张224×224的图按14×14切块是256个token,336×336是576个,分辨率再往上,单图就上千;长视频则是帧数乘上每帧的块数,量级一路往上翻。Transformer的注意力开销随序列长度平方增长,视觉序列一长,成本立刻抬高。

视觉理解和扩散式生成(VLM+DiT)这类架构要同时跑自回归和扩散,token消耗只会更多。

最典型的是OpenAI的Sora。App上线到OpenAI宣布关停,前后仅半年左右。外媒称,Sora每天算力成本100万美元,用户数量还在下滑。成本明显高过收入,公司最终选择止损。

推理端更贵。文本模型能把几十个请求批在一张卡上,多模态生成模型做不到,它得每几毫秒生成一次环境状态、实时流式往外送,每个用户相当于独占一条GPU管道。

另一个难题是评分。模型生成的内容需要大量评价人员来打分,Seedance背后的数据评价团队高达上千人。

LLM能用相对统一的基准打分,推理、代码、数学都算,版本之间可以直接比较,团队KPI也容易对齐。

与多模态生成的情况正好相反。MMMG 基准的作者指出,模型本身在往前跑,多模态生成的可复现评测却没跟上。人工评测被当成金标准,可它做不了大规模,主观性又强,想靠它系统找出模型弱点并不容易。

周畅庞天宇相继离职,大厂对多模态生成态度生变(配图 2)

字节之所以找上千人的评测团队给Seedance做评测,核心就是堆人数,压低主观性对模型性能的影响。

一旦评价要靠美学、时序连贯、人类偏好,你就很难用分数判断模型好坏,也难判断这个模型团队还值不值得继续投资源。

比起“这个视频好看吗”这种明摆着主观的讨论,大家还是觉得“这个版本在基准上提升了几个点”更有讨论价值。

字节在Seedance上收入不错,但最关键的技术拐点其实是AGI,它就相当于行权价。

AGI真要非多模态生成不可,那就等于兑现;一旦发现AGI并不需要多模态生成,全部权利金就归零。

而大厂每个月烧掉的token,就是滚动支付的权利金。

眼下,持“AGI跟多模态生成没关系”这种看法的人正在变多。

GLM-5.2到5.3、DeepSeek V4 Flash到Pro,这两组模型都没往视觉方向扩,仅靠后训练就把性能拉了上去。K3的消融实验里,研究员的说法是:“多模态数据每多一点,文本理解、Coding或者数学可能就会变差”。

杨立昆那边则补上了更重的一击。H-JEPA论文走红之后,他所主张的JEPA路线正被更多人接受。

JEPA的思路是在抽象表征空间里对世界做预测,一个像素都不生成。按它的说法,物理世界塞满了没法预判的随机细节,逐像素重建既费劲又容易出错。这实际上给“AGI用不着像素级生成”递上了一份技术论证。

业务部门随之收缩也就难以避免。腾讯二季度财报电话会开完之后,资源往WorkBuddy倾斜,其他新AI产品的优先级则在往下调。

多模态生成究竟出了什么问题?

7月24日,腾讯TEG发了一份内部通知:大语言模型部、多模态模型部一并撤销,改设基础模型部,首席AI科学家姚顺雨兼任负责人,汇报对象是TEG总裁卢山。

腾讯当时给出的说法是“提升模型研发和协同效率,探索全模态模型的智能上限”。

这两个被撤的部门,是2025年4月才拆出来的。一条线管文本推理,另一条线管图像、视频与3D生成,级别相同,各自独立推进,腾讯内部叫“双轨研发”。

更早的3月20日,腾讯已经把办了近十年的AI Lab撤掉,一部分人进了大语言模型部,一部分转去产学研合作中心,计算机视觉、语音这些原先单独设的能力,统一收进混元体系。

外界的普遍判断是,合并的真正症结在于大语言模型和多模态模型的训练标准对不上,技术没法互通,算力还会互相消耗。

过了一个月,轮到字节。8月的组织调整中,周畅起家的视觉语言模型VLM被收进大模型LLM体系,降为LLM下面的一个数据子部门。一位Seed人士对36氪说,“他丢了龙兴之地,基本就没有核心地盘了”。

之所以如此,是因为那阵子要让大模型“看见”东西,得靠一种“胶水科技”。

做法是拿一个训好的纯文本LLM,前面挂视觉编码器,把图片切小块转成向量,中间再训一层投影,将这些向量译进语言模型的词表空间,最后和文字拼到一块喂进去。LLaVA、Qwen2-VL、DeepSeek-VL2当时都走这条路。

它最突出的优点是省钱。

视觉编码器有开源的可以拿来用,语言模型是自家现成的,中间那层只消一层胶水把两头粘住。

独立的多模态部门,基本上就是围绕这层胶水搭起来的:有人负责视觉编码器,有人负责对齐数据,有人负责图文指令微调,还有人负责评测。胶水还在,部门就有存在的理由。

周畅庞天宇相继离职,大厂对多模态生成态度生变(配图 3)

可如今这层胶水已经没了,大厂纷纷转向原生多模态——从预训练第一层起,就把图像、文本、音频、视频的token混进同一条主干。

今年2月,阿里从Qwen3.5起将视觉能力以早期融合的方式放进主线模型,此后没再发布新的通用VL理解模型。

目前大厂的多模态大致分两条路。一条是梁文锋的理解路线,让模型看懂图片、视频,回答的是怎么感知世界,这条路确实跑通了。

另一条,是把视觉理解和扩散式生成装进同一套架构,让模型在理解世界之余还能产出内容。

2025年GPT-4o问世后,谷歌、阿里、字节都试过这条路,结果谁也没跑通。

图像和视频生成靠的是扩散模型,在连续潜空间里一步步去噪。训练目标、数据表征、计算机制都对不上,硬塞进一个模型,单是防着任务之间彼此拖累就够让人头疼。

腾讯混元一位多模态研究员对36氪表示,“多模理解和生成没那么统一,理解一般和LLM团队在一起,生成相对独立”。阿里Qwen的研究员也说,“理解、生成统一”基本没有已知很有效的方案。评测同样没跟上,一张图画得好不好、一段视频合不合意图,判断起来比一道数学题算没算对难得多。

周畅在字节主推的那套说法,叫「多模态理解与生成统一」,走的是第二条路。

搁到期权里,这叫虚值;公司把部门收掉,等于不再行权。

落差

业务部门一收缩,原来带这个部门的人,级别自然跟着往下走。

周畅2024年8月从阿里跳来字节,职级4-2。有报道说他的年包是八位数,跟他一道过来的还有十余名阿里旧部,两边一度打过竞业限制的劳动仲裁。

在阿里时他做过通义大模型的核心技术负责人,走之前发的Qwen2在Hugging Face开源榜排到第一,压过当时的Llama 3-70B。到了Seed,他管多模态交互与世界模型,汇报对象是吴永辉。

周畅庞天宇相继离职,大厂对多模态生成态度生变(配图 4)

此后两年,他手上的盘子越铺越大。2025年7月,豆包视觉多模态生成负责人杨建朝对外说「暂时休息」,36氪引述Seed内部人士的说法是,组织上要求杨建朝改向周畅汇报,杨建朝随后走人,Seedream、Seedance两条视觉生成线归到周畅名下。

2026年6月2日,晚点报道字节内部动了架构。李航原来负责的Seed Robotics团队已经向周畅汇报了一个多月,字节还在找一位职级L8、对标阿里P10-P11的具身智能技术负责人,也是向他汇报。

按这篇报道的说法,周畅管得更宽,理由是机器人能和多模态交互、世界模型在数据和技术上互相打通。四条线攥在一个人手里,媒体当时称他是Seed里管理边界最宽的技术负责人之一。

6月刚扩完权,8月VLM就并进LLM、变成数据下面的子部门。

庞天宇入场时的声势,比周畅还要响一些。

他落脚的地方是混元多模态部Exploration Center,职责一栏写的是「强化学习前沿算法探索」。

1月29日,他在小红书贴出招聘启事,顺手把加入的事也官宣了;2月4日正式到岗;6月带队开源UniRL框架,把扩散模型、自回归模型和生成理解统一模型的强化学习后训练装进同一套流程;10月框架更新到v0.2.0,核心署名作者里还有他。

可到了11月2日,媒体报出消息:混元从分散走向集权,他在这一轮收拢里「失去了他在组织版图上最初被许诺的那个位置」。

1月26日的员工大会上,Pony提到「姚顺雨加入之后,公司加大吸引人才的力度,重构研发团队」,还说内部要加快Co-design、让混元和元宝多协同。

1月28日混元开源图像3.0图生图版本,接进了元宝。当时给出的数据是,混元图像、视频衍生模型累计3000个,视频模型社区下载超500万,混元3D系列超300万。那阵子多模态模型部还是和大语言模型部平级的一级部门。

后来7月24日两个部门合并,9月前OpenAI研究员田永龙出任混元多模态负责人。

没有人被降职,头衔没动,代码没动,成果也没动。

可有人起,就总有人落。从别人向他汇报、自己单挑一条线,变成他向别人汇报、只负责主线里的一块,以高姿态进来再经历这种转折,心里难免有落差。

期权这东西,对大厂来说就是掏点小钱赌一把。真正被卷进去的人,日子就不好过了。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关 AI 工具

AI 导航

相关推荐 按相关度与热度排序

全部资讯 →
  1. Personal Agent的竞争,开始于用户想清楚之前

    谁能更早承接用户尚未明确的需求,谁就更有机会成为新的消费入口。 一笔消费,究竟从什么时候开始?很多人会觉得,是下单付款的那一刻。但只要回想一次最近的外出,就会发现它的起点其实早得多。 订下一家餐厅之前,可能经历过想见朋友、想庆祝、想换个环境等不同念头;同样一句今晚想出去,最终可能对应一顿饭、一场演出,也可能是一条没有预

    来源 AI 行业观察
  2. Meta的Muse带火个人智能体:1000万人设置,14人公司估值百亿

    10月底,扎克伯格在Meta的财报会上披露,Muse上线约一个半月,在美国和加拿大已有超1000万人设置个人智能体。Muse于9月上线,当月Meta股价上涨约27%,创下2022年11月以来最佳月度表现。这家此前被认为在模型竞赛中落后的公司,靠一款消费级产品重新拿回了话语权。 跟进者随即密集出现。阿里、腾讯、字节都已推

    来源 AI 行业观察
  3. Claude Code前产品负责人Cat Wu加盟OpenAI,将主导核心产品管理

    Claude Code前产品负责人Cat Wu在宣布离开Anthropic仅一天后,确认加入OpenAI并领导其核心产品团队的产品管理。她将与Nick Turley合作开发企业产品、与Ashley Alexander推进消费者产品业务,向Tibo Sottiaux汇报。此次变动正值OpenAI与Anthropic争夺A

    来源 凤凰科技
  4. 模型之外,腾讯还在补什么?

    Agent 能干的活,从年初到现在肉眼可见地变多了,企业应用也在加速。麦肯锡今年 8 月的调查显示,大型企业 Agent 规模化应用比例从去年的 27% 升至 40%。 但在 Agent 深入企业业务的过程中,一些问题也开始显现。行业里的判断比较一致:不是模型不够强,而是断点太多。在 2026 腾讯全球数字生态大会上,

    来源 AI 行业观察
  5. Karpo做城市生活AI:从心情出发,帮用户把念头变成安排

    谁能更早承接用户尚未明确的需求,谁就更有机会成为新的消费入口。 一笔消费,究竟从什么时候开始?很多人会觉得,是下单付款的那一刻。但只要回想一次最近的外出,就会发现它的起点其实早得多。 订下一家餐厅之前,可能经历过想见朋友、想庆祝、想换个环境等不同念头;同样一句今晚想出去,最终可能对应一顿饭、一场演出,...

    来源 腾讯网
  6. Ripple-65B Preview发布:65B稠密模型智能体编程超越更大规模对手

    IT之家 11 月 6 日消息,由前谷歌研究员创立的人工智能实验室 Ricursive Intelligence 当地时间本月 4 日发布了 Ripple-65B Preview,宣称其在美国开放权重模型中拥有最为出色的智能体编程表现。 Ricursive Intelligence 此前的工作专注于 AI 驱动的芯片设

    来源 AI 行业观察
  7. 苹果AI国行版开放测试:千问接入Siri,新Siri缺席

    苦等两年多,国行用户终于等来了苹果AI。11月4日,苹果发布了iOS 27.3开发者Beta版,国行版Apple Intelligence(苹果智能)首次开放测试。 这是苹果AI第一次真正进入中国大陆市场,但其首次发布在2024年6月。两年期间,国产手机厂商已经将AI消除、智能摘要、实时翻译乃至跨应用智能体等功能陆续装

    来源 AI 行业观察
  8. 申通快递携千问办公:AI办公体系落地全国网点

    【TechWeb】11月6日消息,申通快递与千问办公正式达成战略合作。双方将围绕快递核心场景打造 AI 办公体系,以Agent能力支撑申通快递全国网点的增长战略落地,推动AI从总部管理向末端网点规模化输出,加速物流服务智能化升级。申通快递总

    来源 TechWeb
  9. 腾讯混元Hy4登Agent Arena:中国模型第一,全球实验室第五

    Arena宣布腾讯混元Hy4在Agent Arena榜单中成为排名第一的中国模型,按实验室排名腾讯混元位列全球第五,是前五名中唯一的中国AI实验室;在单模型综合排行榜中Hy4排名第13位。Hy4净改进得分升至+5.4%,单任务中位成本0.57美元,进入帕累托前沿。

    来源 凤凰科技
  10. 奇富科技开源ModelEvo 2.0:自动建模Agent新增自主搜索与经验复用

    【TechWeb】11月6日消息,尽日,奇富科技正式开源自动建模Agent ModelEvo 2.0。新版本面向结构化与表格数据,在标准化建模流程的基础上,进一步实现自主搜索、可信评估与跨任务经验积累复用。用户明确业务目标、提供建模样本与验证方案后,Agent可在给定预算内分析数据、规划实验并持续优化,对通过确认与交付

    来源 AI 行业观察
  11. 谷歌把自愿离职扩至五国,微软此前已覆盖6万人

    约一周前,美国另一IT巨头微软宣布向约6万名员工提供自愿离职方案,涉及人数约占其全球22.3万名员工的27%。在谷歌内部,员工此前甚至主动呼吁将自愿离职设为每轮裁员前的必经步骤。自愿离职是一种缓冲,不是成本压力的消失。微软一面以1750亿美元的资本开支押注AI基础设施,一面通过自愿离职和零星裁员控制运营成本;谷歌一面将

    来源 TechWeb
  12. 谷歌五国推自愿离职:补偿最多12个月工资,AI部门不在列

    约一周前,美国另一IT巨头微软宣布向约6万名员工提供自愿离职方案,涉及人数约占其全球22.3万名员工的27%。在谷歌内部,员工此前甚至主动呼吁将自愿离职设为每轮裁员前的必经步骤。自愿离职是一种缓冲,不是成本压力的消失。微软一面以1750亿美元的资本开支押注AI基础设施,一面通过自愿离职和零星裁员控制运营成本;谷歌一面将

    来源 TechWeb
  13. Meta收购Conductor:AI编程智能体赛道再加码

    Conductor 可让用户在多个并行工作空间中部署 AI 智能体,协同处理同一项目的不同模块。其云服务将于 11 月 20 日关闭并删除用户数据,核心功能维持至明年年初。创始人霍尔茨将加入 Meta 超级智能实验室。#Meta收购Conductor# #AI编程#

    来源 IT之家
向下滚动自动加载更多