Nvidia brengt AI voor deepfake-detectie en videoverbetering naar omroepen

Op de IBC-beurs in Amsterdam, die van 11 tot 14 september loopt, laat Nvidia zien hoe kunstmatige intelligentie langzaam de controlekamers van tv-zenders en streamingdiensten binnendringt. Meer dan 44.000 bezoekers uit ruim 170 landen bekijken er de nieuwste techniek voor uitzendingen, sport en videoproductie. Nvidia breidt daarvoor zijn platform AI for Media uit: een verzameling software-onderdelen die redacties, sportploegen en streamingbedrijven direct kunnen inbouwen in hun bestaande systemen.

Nepvideo's herkennen met 99 procent nauwkeurigheid

Een van de opvallendste onderdelen is de Synthetic Video Detector (SVD), die inschat of beeldmateriaal echt is of door AI is gemaakt. Sinds de introductie eerder dit jaar is de nauwkeurigheid gestegen naar 99,3 procent bij video's die volledig uit tekst zijn gegenereerd, en 97,7 procent bij video's die op basis van een startfoto zijn gemaakt. Mediabedrijven als Dalet, TwelveLabs en Wowza bouwen de detector al in hun controlesystemen in, zodat redacties en compliance-teams beeldmateriaal snel kunnen controleren op deepfake-kenmerken voordat het wordt uitgezonden. Wowza, wiens streamingtechniek wereldwijd in meer dan 35.000 videosystemen draait, kan de tool zelfs lokaal, in de cloud of volledig los van internet laten draaien, wat belangrijk is voor organisaties die gevoelig beeldmateriaal niet willen delen.

Vloeiendere sportbeelden en automatische vertaling

Voor sportproducties introduceert Nvidia 3D Body Pose, software die met één camera de bewegingen en gewrichtshoeken van sporters vastlegt zonder dat spelers sensoren hoeven te dragen. Productiebedrijf Vizrt gebruikt de techniek al om in virtuele studio's realtime lichteffecten te laten meebewegen met presentatoren. Daarnaast helpt Video Frame Generation om beelden vloeiender te maken door met AI extra tussenframes te berekenen. Ross Video zet de techniek in voor slowmotion-herhalingen in sportuitzendingen, met tot zes keer vertraagde beelden zonder dat daarvoor een dure ultrahogesnelheidscamera nodig is. Ook beeldsnelheid en beeldkwaliteit van bestaand archiefmateriaal krijgen een boost: Video Super Resolution (VSR) doet aan video-upscaling en haalt ruis en compressie-artefacten weg, terwijl TrueHDR gewone video omzet naar beelden met hoog dynamisch bereik.

Automatisch nasynchroniseren voor een wereldpubliek

Voor internationale distributie biedt Nvidia LipSync en Active Speaker Detection: technologie die mondbewegingen laat aansluiten op een nieuwe taal, zodat interviews en programma's makkelijker nagesynchroniseerd kunnen worden. Broadcasttechnologiebedrijf NDI gebruikt dit al voor livevertaling en lipsynchrone dubbing, waardoor zenders met minder bandbreedte en productiekosten meerdere taalversies van dezelfde uitzending kunnen aanbieden. Tot slot maakt de koppeling tussen Nvidia's Holoscan for Media en de open standaard Media Exchange Layer het makkelijker voor software-onderdelen van verschillende leveranciers om via een gedeelde infrastructuur met elkaar te communiceren, wat de overstap naar volledig software-gestuurde tv-productie moet versnellen.