Adobe MAX亮出四项AI实验:照片变3D场景,聊天即可设计角色
IT之家 11 月 11 日消息,每年举办的 Adobe MAX 大会上,Adobe 展示的最令人印象深刻的技术之一,往往是那些仍处于实验阶段、尚未正式推出的创新功能。今天,该公司公布了最新一批实验项目:它们能够将普通图片转换为可探索的 3D 场景,通过与 AI 角色对话来设计角色形象,还能让照片编辑变成简单的复制粘贴
Adobe MAX大会每年都会展示一批还没正式推出的实验性技术,往往也是现场最抓眼球的部分。11 月 11 日,Adobe 又亮出了最新一批实验项目:普通图片能变成可以走进去看的 3D 场景,用户能跟 AI 角色聊天来设计角色形象,照片编辑也能简化成复制粘贴。

第一个项目叫 Project Screen Test,名字听着像试镜,实际用途也确实如此,目标是让用户更方便地生成 AI 角色,再把这些角色用到视频内容里。
跟以往的做法不一样,用户不用再靠文字提示词去描述角色该怎么说话、怎么表现,而是直接和角色对话,像在试镜现场指导演员那样一步步调教。
上手时,用户先要给角色定几个基本性格特征,比如“焦虑、害羞、笨拙”,然后为角色设置声音。声音可以从预设选项里挑,也可以用文字提示词描述,或者上传一段音频样本让 AI 参考。
接着,用户能像打 FaceTime 视频通话一样跟 AI 角色聊起来,把人物设定继续补全,成长背景、性格、目标、缺点、恐惧,以及一些独特的动作习惯,都可以在这一步敲定。

角色设计完成后,用户还能描述想让角色置身的环境或情景,系统会据此生成相应的动态试镜视频。
眼下 Project Screen Test 还只是一个独立的创意实验,将来会不会被整合进 Adobe 现有的 AI 视频工具,目前没有明确说法。
从实际效果看,不少 AI 动画角色显得没什么灵魂,而这项工具生成的角色个性更鲜明、也更连贯。这恰恰是它存在的意义:传统动画制作里,角色的每个细节都由创作者有意识地设计,AI 视频生成能提供的创作控制权要少得多,很难做到这一步。
另一个项目是 Project Sight Span,它能把普通照片和图片转成用户可以探索的 3D 空间,画面的构图和视角都能重新调整。

这项技术会生成原始画面之外的物体和背景,把一张平面图片扩成完整的三维环境。用户转动视角去看原本被拍摄者挡住的背后区域时,系统生成的内容也能和原始画面自然接上。
不过在 3D 环境里浏览时,画面中的物体和背景会显得像素化,细节也不够清楚。等用户选定了最终视角,系统才会把相应画面的分辨率恢复过来。
Sight Span 支持的平面图像种类不少,照片、绘画、插画都行,还能保留并复现原作品的艺术风格。用户就算调整照片中人物的纹身位置或面部特征,这些细节依然能保持很高的辨识度,和原始参考图像高度一致。
这项技术有点像苹果 Spatial Reframing 空间重构功能的加强版:用户调整画面元素的幅度可以更大,甚至能彻底换掉拍摄角度。只是经过这么大幅度的调整,最终作品似乎也不太适合继续叫一张照片了。
Project Sound Bender 是一项 AI 音频混音功能,用户调整视频音效的方式,跟在色轮上移动光标差不多。

使用的时候,用户上传一段视频,再用文字提示词描述想要的声音效果,比如“冒着气泡的科幻炼金锅声音”,Sound Bender 就会自动生成对应音效,并跟视频同步。
同时,工具会给出一个方形声音控制面板,供用户实时调整音效。面板四个角会自动分配不同类型的 AI 生成声音,比如密集的咕噜声和气泡爆裂声、岩石沸腾般的轰鸣声、带有音高变化的电子音,以及噼啪作响的电火花声。
用户拖动面板上的光标,就能自由选择想突出的声音类型,四个角也可以分别设置不同的音效。
Adobe 展示的第四个是 Project Rinse Repeat,它能把用户已经做完的编辑操作复制下来,自动套用到同一张照片里的其他人物或物体上。


举个例子,用户花了大把时间给照片中某个人物磨皮、去痘痘和皮肤瑕疵,Rinse Repeat 就能根据这些已经完成的具体修改,把类似处理自动应用到合影里的其他人身上。
商业营销图片也能用上这项功能。用户给产品加上阴影效果后,其他产品即使形状和尺寸不同,系统也能自动适配出相应的阴影。
Rinse Repeat 基于 Photoshop 构建。应用到其他人物或物体上的编辑效果仍然完全可编辑,因为工具会调用 Photoshop 原生功能重新创建这些修改,而不是把处理后的图像直接盖上去。
这些名为“Sneaks”的项目目前都只是技术预览,未来有可能被开发成 Adobe Creative Cloud 应用或 Firefly 平台中的正式工具,但并非所有项目都保证最终会推出。
不过,这批项目几乎全部围绕 Adobe 的生成式 AI 技术展开。AI 工具如今已经是 Adobe 增长战略的核心,至少有一部分实验功能最终正式上线的可能性相当高。
这些 AI 实验看起来再新奇、再有趣,也释放出一个信号:如果工具足够实用,未来 AI 就有可能取代创意专业人士目前使用的部分工具和素材库,而不管他们对这项技术抱着怎样复杂的态度。
这些实验项目背后有一处相通之处:照片编辑、视频制作、音频混音这类流程本就复杂,它们想做的就是把上手难度压下来,让操作更直观,互动感也更强。
有些功能乍看像玩具,实际却能帮用户在真正的创意项目里完成实打实的修改。
Adobe 资深首席研究科学家高塔姆 · 迈索尔(Gautham Mysore)对 The Verge 表示,这么做是为了让交互方式更直观,也让有经验的创作者能把控制做得更细。他说,Sound Bender 的声音探索功能、Sight Span 的摄像机视角调整功能,都说明专业人士可以借助自己的判断,更直接地调整并完善最终效果。“创作意图和实际控制能力怎么结合得更紧,是我们眼下重点在探的方向。”