Adobe Max发布四项AI实验:照片变可漫游 3D场景、对话塑造角色
Adobe在年度Max大会上展示Project Screen Test、Sight Span、Sound Bender和Rinse Repeat四项实验性技术,均为技术预览,不保证进入Creative Cloud或Firefly产品。
AI解读:Adobe在Max大会公布四项实验项目:对话式塑造AI角色的Screen Test、把平面图像转为可漫游 3D空间的Sight Span、用“声音调色盘”实时混合音效的Sound Bender、以及把修图操作复制到同图其他对象的Rinse Repeat。
这些项目属于Adobe的“sneaks”技术预览,可能被开发为Creative Cloud应用或Firefly平台功能,但官方未承诺一定上线。
据The Verge现场体验描述,Sight Span生成 3D环境时画面像素化、边缘模糊,仅在选定角度后恢复分辨率;Screen Test目前是独立创作练习,尚不清楚能否接入Adobe现有AI视频工具。
Adobe高级首席研究科学家Gautham Mysore对The Verge表示,让交互更直观也是为了让有经验的创作者获得更精确的控制,并举例Sound Bender的声音探索和Sight Span的机位调整。
Adobe在年度Max大会上公布四项实验性AI项目,分别涉及AI角色塑造、平面图像转 3D空间、音效实时混合和修图操作复制。The Verge报道称,这些项目以“sneaks”形式展示,属于可能被开发为Creative Cloud或Firefly功能的技术预览,Adobe未保证它们会正式上线。
四项实验各自做什么
Project Screen Test面向AI生成角色的开发:用户先描述“焦虑、害羞、笨拙”等基础性格,并通过预设、文字描述或上传音频样本为角色设定声音,再以类似FaceTime对话的方式补充角色的背景故事、气质、目标、缺陷、恐惧、动作习惯。设定完成后,用户描述场景即可生成角色的动画试镜片段。The Verge称,Screen Test目前是独立的创作练习,尚不清楚它是否或如何进入Adobe现有的AI视频工具。
Project Sight Span把照片、绘画和插画等平面图像转成可导航、可重新取景的 3D环境,并为原画框之外生成物体和背景。The Verge的体验描述称,3D环境中的画面像素化、不够清晰,选定角度后分辨率会恢复;重新定位后的纹身和面部特征仍可辨认,并能保留艺术风格。
Project Sound Bender处理视频音效:用户上传视频片段并用文字描述想要的声音,例如“冒泡的科幻坩埚声”,工具生成音效并自动与视频同步,同时提供一个方形“声音画布”,四个角各自对应一种AI生成音效,拖动光标可调整哪种声音最突出,也可以自定义每个角的声音。
Project Rinse Repeat围绕Photoshop构建,把用户在一张照片中对某个对象的编辑复制到同一张图的其他对象或人物上,例如把去除痘印的处理适配到合影中的其他人,或为营销图中不同形状、尺寸的产品添加阴影。The Verge称,被复制的编辑仍可继续修改,因为工具用Photoshop原生工具重建了这些操作。
适用范围与限制
四项工具均处于实验阶段。The Verge明确表示,这些“sneaks”不保证毕业为正式功能;报道同时提到,这些项目几乎都建立在Adobe的生成式AI研发之上,而AI工具在公司增长战略中处于核心位置,因此至少部分实验可能正式推出。
Screen Test的产出目前限于独立的角色试镜和场景生成,报道未说明它与其他Adobe视频产品的关系。Sight Span接受任何平面图像,但体验中的 3D画面质量有限。Sound Bender和Rinse Repeat的公开信息来自大会展示与媒体报道,尚无正式发布日期或定价。
Adobe对控制权的说法
Adobe高级首席研究科学家Gautham Mysore对The Verge表示,让交互更直观,也是为了让有经验的创作者获得更精确的控制;他举Sound Bender的声音探索能力和Sight Span的机位调整为例,称专业人士可以借此直接运用判断、细化结果,创意意图与控制之间的联系是团队正在探索的重点。这是Adobe研究人员的说法,并非对产品效果的独立验证。