
Adobe在年度Max大会上公开多项代号“Sneaks”的实验性AI工具,为照片、视频及音频编辑带来崭新方式。这些工具能够将单一影格修改即时套用至整段视频、轻松操控形象光源,以及修正录音中的发音错误。
Project Frame Forward是其中最令人惊艳的实验项目,让视频编辑者无需使用遮罩即可在片段中添加或移除任何元素。Adobe示范展示了Frame Forward如何在视频首个影格中识别、选取及移除一名女子,并以自然背景取代,效果类似Photoshop的Context-aware Fill或Remove Background功能,整个移除过程只需数次点击便能自动套用至整段视频。
用户也可通过绘画位置并以AI提示描述内容,将对象插入视频影格中。这些变更同样会套用至整段视频。示范更显示插入的对象具备场景感知能力,例如生成的水洼会反映视频中原有猫只的移动。
Project Light Touch运用生成式AI重塑照片中的光源。此工具可改变光线方向,令房间看起来如同由原本未打开的灯具照明,并让用户控制光线与阴影扩散程度。工具更可插入动态光源,在编辑画布上拖拽操作,实时地让光线绕过或穿透人物及对象,例如从内部照亮南瓜,并将周边环境从日间转换至夜间。这些经处理的光源色彩也可调整,让用户能够调节暖度或创造鲜艳的RGB效果。
Project Clean Take是一项全新编辑工具,可通过AI提示改变语音发音方式,无需重新录制视频或音频片段。用户可改变说话者声音的表达方式或情感,例如让其听起来更快乐或充满疑问,或在保留原说话者声音特征的情况下完全替换字词。工具更可自动将背景噪音分离为个别音源,让用户能选择性调整或静音特定声音,有助保留整体音频品质同时改善语音清晰度。
Adobe在Max大会上展示的Sneaks还包括Project Surface Swap,可即时改变对象及表面的材质或纹理;Project Turn Style可通过旋转方式编辑形象中的对象,如同处理3D形象;以及Project New Depths,让用户将照片当作3D空间编辑,当插入对象时系统会识别其应否被周边环境部分遮挡。
这些Sneaks实验项目目前并未向公众开放使用,也不保证会成为Adobe Creative Cloud软件或Firefly应用程序的正式功能。不过许多功能,例如Photoshop的Distraction Removal及Harmonize工具,最初也是以Sneaks项目起步,因此这些实验性功能未来有机会以某种形式提供给创意工作者使用。
来源:Adobe











