Adobe的全新升级技术利用AI锐化视频

Adobe 最近宣布的大多数新功能和实验都涉及人工智能，例如Premiere Pro 中的对象添加和删除以及Photoshop 中基于文本的图像生成。据The Verge报道，现在，该公司推出了VideoGigaGAN，这是一项实验性人工智能功能，据称可以将视频质量提升八倍，而不会出现闪烁或失真等常见的伪影。

据 Adob​​e 称，VideoGigaGAN 击败了其他视频超分辨率 (VSR) 方法，因为它避免了 GAN(通用对抗网络)引入的常见伪影和闪烁。同时，它还增加了清晰度和细节——而大多数其他系统无法同时完成这两件事。

当然，该系统正在弥补并非完全存在的细节，因此这不适合诸如法医视频增强之类的事情，就像犯罪现场调查(CSI)风格的犯罪节目一样。但它所添加的细节看起来非常真实，比如皮肤纹理、细毛、天鹅羽毛细节等等。

Adobe 研究人员表示，该模型建立在名为 GigaGAN 的大型图像上采样器之上。以前的 VSR 模型很难在结果中生成丰富的细节，因此 Adob​​e 结合了“时间注意力”(减少随时间累积的伪像)、特征传播(在不存在的细节处添加细节)、抗锯齿和所谓的“HF 穿梭”(穿梭)高频特征)来创建最终结果。

如果将其添加到 Premiere Pro 或 After Effects 等产品中，它可以让视频制作者使低分辨率镜头看起来更好，尽管使用人工智能来增强人物效果是一种有争议的做法。目前还没有关于 Adob​​e 是否计划这样做的消息(目前，这些剪辑很短，并且只能以 12 fps 的速度播放)，但包括 NVIDIA、微软、Blackmagic Design 等在内的许多公司也在致力于 AI 升级技术。