Onscherpe video’s behoren binnenkort ook tot het verleden met nieuw AI-model.
Foto’s kunnen al langer scherper en beter worden gemaakt met behulp van AI maar dit kan nu ook met video’s.
Onderzoekers van de Universiteit van Maryland hebben in samenwerking met Adobe een nieuw AI-model ontwikkelt genaamd VideoGigaGAN, dat zich richt op het verbeteren van video’s met hoogwaardige details. Het model is een evolutie van GigaGAN, een image-upsampler, en nu aangepast voor video door de integratie van speciale tijdelijke modules.
Deze innovatie komt niet zonder uitdagingen; het direct uitbreiden van GigaGAN naar video leidde aanvankelijk tot significante tijdelijke flikkeringen. Echter, door het identificeren en aanpakken van kernproblemen heeft het team technieken ontwikkeld die de temporele consistentie van geüpsamplede video’s aanzienlijk verbeteren.
Experimentele resultaten tonen aan dat VideoGigaGAN consistent superieure video’s genereert met verfijnde detailniveaus, in tegenstelling tot eerdere methoden voor videorsuperresolutie (VSR).
De effectiviteit van VideoGigaGAN is gevalideerd tegenover de meest geavanceerde VSR-modellen, waarbij indrukwekkende resultaten worden getoond op publieke datasets en in demonstraties van 8x superresolutie.
Meer informatie en onderzoekspaper op: Github.io