
“Project Frame Forward”是Adobe正在开发的一项创新技术,它能将您对视频第一帧所做的任何更改,自动且无缝地应用到整个视频片段中。
在一年一度的Max大会上,Adobe展示了一系列正在研发中的实验性AI工具,旨在为照片、视频和音频编辑带来全新的直观体验。这些被称为“Sneaks”(预览)的创新项目,不仅包括能将单帧修改即时扩展至整段视频的工具,还有轻松操控图像光影、以及校正音频中发音错误的强大功能。
在众多“Sneaks”中,“Project Frame Forward”无疑是视觉效果最为震撼的一项。它让视频编辑者无需耗时费力的遮罩(masks)操作,即可轻松地从视频素材中添加或移除任何物体或人物。Adobe的演示清晰地展示了“Frame Forward”如何智能识别、选择并移除视频第一帧中的一位女性,随后利用与Photoshop中“内容感知填充”或“移除背景”工具相似的技术,用自然的背景无缝替换。更令人惊叹的是,这一移除操作只需点击几下,就能自动应用到整段视频中,极大地提升了工作效率。
用户还可以通过简单的绘制和AI提示,将物体插入到视频帧中,并描述希望添加的内容。这些改动同样会被同步应用到整个视频。演示中还特别指出,这些插入的物体可以具备情境感知能力,例如生成的水坑能够实时反映视频中既有猫咪的移动轨迹,让新增元素与现有场景融为一体,效果逼真。
另一款引人注目的工具是“Project Light Touch”,它利用生成式AI来重塑照片中的光源。这款工具不仅可以改变光线的方向,还能让房间看起来像是被原图并未开启的灯光照亮。用户可以精确控制光线的扩散和阴影的形状。此外,它还能插入动态光源,用户可以在编辑画布上随意拖动,光线会实时地环绕并穿梭于人物和物体之间,例如从内部照亮一个南瓜,并能将周围环境从白天转换为夜晚。这些被操纵的光源的颜色也可随心调整,用户可以微调色温,或创造出充满活力的RGB效果。
“Project Clean Take”是一款全新的音频编辑工具,它能够利用AI提示改变语音的发音方式,从而省去重新录制视频或音频片段的麻烦。用户可以调整说话者的语调或情感——例如让他们听起来更开心或更具探究性——甚至在保留原始说话者独特声音特征的同时,完全替换掉某些词语。该工具还能自动将背景噪音分离成独立音源,使用户可以有选择地调整或静音特定声音,在改善语音清晰度的同时,保持整体音频的完整性。
这些仅仅是Adobe Max大会上展示的众多“Sneaks”中的一小部分。其他值得关注的项目还包括“Project Surface Swap”,它允许用户即时改变物体和表面的材质或纹理;“Project Turn Style”,能像编辑3D图像一样旋转图片中的物体;以及“Project New Depths”,它让用户能够像在3D空间中一样编辑照片,并能识别何时插入的物体应被周围环境部分遮挡。您可以在Adobe的官方博客上找到每个“Sneaks”预览的详细介绍。
需要注意的是,这些“Sneaks”目前尚未向公众开放使用,并且不能保证它们一定会成为Adobe Creative Cloud软件或Firefly应用的官方功能。然而,许多现有功能,例如Photoshop中的“分心去除”和“和谐”工具,最初都是以“Sneaks”项目启动的。因此,这些实验性功能中的某些版本很有可能在未来提供给全球的创意工作者。
