Nyheter

Nytt system kombinerar iPhone-videor för tillgänglig 4D-videoredigering

Nytt system kombinerar iPhone-videor för tillgänglig 4D-videoredigering


We are searching data for your request:

Forums and discussions:
Manuals and reference books:
Data from registers:
Wait the end of the search in all databases.
Upon completion, a link will appear to access the found materials.

Forskare vid Carnegie Mellon University har kombinerat iPhone-videor som tagits från separata kameror för att skapa 4D-visualiseringar, vilket gör det möjligt för tittarna att se snabba åtgärder från olika vinklar, enligt ett nytt pressmeddelande. Den nya fotograferingsprocessen kan till och med ta bort människor eller föremål från vyn.

Den här nya metoden - som låter videoredigerare visa upp nya knep i realtid - kan få konsekvenser för en tid när teknik för ansiktsbyte redan är på väg att orsaka en seismisk förändring av tillförlitligheten för videoinnehåll.

RELATERADE: ATT FÖRSTÅ DEN FJÄRDE DIMENSIONEN FRÅN VÅRT 3D PERSPEKTIV

Skapa 4D-scener från flera visualiseringar

Föreställ dig en levande händelse där konserten eller sportspelet (till exempel) fångas upp från varje smartphone i teatern eller arenan och att eventuella hinder för synfältet snabbt kan avlägsnas.

Det är yr, men också spännande.

Varje video - inspelad oberoende av flera utsiktspunkter - från gäster vid bröllopsmottagning, kunde placera tittarna där, mitt i stunder som varar för evigt, Aayush Bansal, en doktorsexamen. student i CMU: s Robotics Institute, förklarade i pressmeddelandet.

En annan applikation ligger i att spela in skådespelare i en miljö och sedan sätta in dem i en annan, tillade han.

"Vi är bara begränsade av antalet kameror," sa Bansal och förklarade att det inte finns någon övre gräns för hur många videoflöden som kan kombineras.

Ta med filmstudior till iPhones

'Virtualiserad verklighet', som Carnegie Mellons pressmeddelande kallar det, är inget nytt. Den här nya videoinspelningsmetoden är viktig eftersom den är både enkel och tillgänglig att använda. Även om det inte är något nytt, var virtualiserad verklighet tidigare exklusiv för studiouppsättningar som CMU: s Panoptic Studio, som har mer än 500 videokameror inbäddade i dess geodesiska väggar.

Det har dock inte varit möjligt att kombinera visuell information om verkliga scener som tagits från flera oberoende och handhållna kameror för att göra en enda omfattande modell som rekonstruerar en 3D-scen.

För att utveckla sin metod använde Bansal och hans kollegor fällningsneuralnät (CNN), en typ av djupinlärningsprogram som är skicklig på att analysera visuella data. Teamet fann att scenspecifika CNN kan adekvat komponera olika utdrag i en fullständig 4D-scen.

'Världen är vår studio'

För att demonstrera sin metod använde forskarna upp till 15 iPhones för att fånga flera scener - inklusive danser, kampsportdemonstrationer och till och med flamingos i National Aviary i Pittsburgh, i USA.

"Poängen med att använda iPhones var att visa att vem som helst kan använda detta system," sa Bansal. "Världen är vår studio."

Bansal och hans kollegor presenterade sin 4D-visualiseringsmetod vid den virtuella konferensen Computer Vision and Pattern Recognition förra månaden. Den nya tekniken är oöverträffad och är bara början på en ny framtid för media- och videoinspelning.


Titta på videon: 11 iOS 14 Settings You Need To Turn Off Now (November 2022).