Adobe推出VideoGigaGAN:AI让模糊视频变清晰

2024年04月26日 由 samoyed 发表 42 0

Adobe Research的一支视频和人工智能工程师团队开发了一款名为VideoGigaGAN的人工智能应用程序,该程序可以接受模糊的视频并对其进行增强,使其变得更为清晰锐利。该团队在arXiv预印本服务器上发布了一篇描述其工作和结果的文章。他们还在项目网站页面上发布了多个经过增强的视频示例。


adobes-videogigagan-us


最近,人工智能应用程序频繁出现在新闻中,主要是因为诸如ChatGPT等LLM(大型语言模型)的发布,消费者可以使用这些模型生成各种输出。然而,人工智能研究也在其他领域持续进行,例如创建人工图像和视频。


在这项新的研究中,Adobe团队创建了一款应用程序,可以接受模糊的视频样本,经过处理后返回具有更高清晰度和锐利度的相同样本——这通常被称为上采样。


这款应用程序被命名为VideoGigaGAN——名称来源于其先前展示的应用GigaGAN,该应用可以生成新的照片或改善旧照片。GAN代表生成对抗网络。


正如其名称所示,该团队使用生成对抗网络来教系统什么是清晰锐利的视频(例如眉毛上的单根毛发,而不是模糊的一团),然后添加了一个“流导向传播模块”以保持视频帧之间的一致性。


他们还使用了抗锯齿技术来防止他们所说的“AI怪异现象”,以及高频特征传输技术来处理视频质量意外下降的情况。


该团队声称,其结果是一个可以将视频图像质量提高多达八倍的系统——所有这一切都不会引入奇怪的色彩、不均匀的线条或其他众所周知的AI生成图像和视频的问题。


他们承认,一些输出完全是基于系统估计进行的人工生成,旨在填补缺失的图像。例如,皮肤上的毛孔、眼睛周围的线条,甚至睫毛都被添加进去,以使生成的视频清晰。


该团队指出,目前,该系统的发布只是一个演示,而不是即将发布的产品;因此,目前尚不清楚Adobe是否会将其发布供大众使用。

文章来源:https://techxplore.com/news/2024-04-adobe-videogigagan-ai-blurry-videos.html
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
写评论取消
回复取消