Facebook nove Surround 360 video kamere omogućuju vam kretanje unutar živih akcijskih scena

Sloboda VR-a s vjernošću stvarnog života

Foto: Facebook

Facebook je danas najavio drugu generaciju dizajna video kamera Surround 360, a ovaj put tvrtka ozbiljno pomaže potencijalnim kupcima da je kupe kao stvarni proizvod. Surround 360, koji je Facebook predstavio prošle godine kao spec-vodič za otvorene izvore za druge da ga mogu graditi, nadograđen je i kao veća, sposobnija jedinica i kao manja, prenosivija verzija.



Facebook veliki model naziva x24, jer sada ima niz od 24 kamere raspoređenih u kuglu umjesto 17 kamera koje je tražio izvorni Surround 360 u obliku letećih tanjurića. Mali je model x6, sa samo šest kamera, ali u daleko upravljivijem paketu. Umjesto da samo objavi sheme dizajna za ove kamere na mreži, kao što je bilo prošle godine, Facebook se sada udružuje s odabranom grupom hardverskih partnera za proizvodnju i prodaju gotovih proizvoda kasnije ove godine. Nejasno je hoće li ti proizvodi na bilo koji način biti označeni Facebookom, ali tvrtka i dalje naglašava da ne planira izravno prodavati kamere.



filmovi 2020
Facebook će omogućiti hardverskim partnerima izradu i prodaju svoje kamere Foto: Facebook

Što se nadogradnji tiče, x24 i x6 nisu samo pročišćene verzije prošlogodišnjeg hardvera. Oni također sada snimaju scene u 8K kvaliteti s onim što je poznato kao šest stupnjeva slobode (6DOF), što znači da se vaše tijelo može kretati naprijed, natrag, gore, dolje, lijevo i desno sve dok nosite VR slušalice s položajnim praćenjem poput pukotina Oculus. Drugim riječima, ovo je ista vrsta slobode kretanja koju omogućuje visokokvalitetni VR, ali ovaj put sa snimkama uživo. Radi se pomoću kombinacije hardvera i softvera koji bilježi bolje razumijevanje dubine objekata na sceni i ponavlja perspektive koje kamera nikada nije izvorno snimila.

Snimamo i tada možemo procijeniti dubinu, kaže Brian Cabral, direktor inženjeringa na Facebooku koji vodi Surround 360 razvoj. Zapravo izračunavamo za svaki piksel gdje se nalazi na sceni. Jednom kada piksel postavi lokaciju, kaže, gledatelji ga mogu gledati iz bilo koje perspektive kao da je dio stvarnog prizora. Nakon postupka procjene dubine, koji Facebook obrađuje s vlastitim prilagođenim softverom u oblaku, videozapis se zatim može uređivati ​​s bilo kojim brojem standardnih skupova alata za naknadnu obradu Adobe, Foundry i drugih.



Sloboda VR-a s vjernošću stvarnog života

Ova 6DOF tehnologija postojala je u prošlosti, obično rezervirana za izuzetno visoke holivudske specijalne efekte i alate za uređivanje, no druge tvrtke u prostoru fotoaparata i VR rade na smanjenju troškova i čineći sadržaj pristupačnijim. Proizvođač fotoaparata Lytro možda je najpoznatiji, s vlastitom opremom koja koristi tehnologiju svjetlosnog polja za hvatanje geometrije svjetlosti u prizoru od 360 stupnjeva uživo. To je drugačiji pristup od Facebooka, koji se više oslanja na računalni vid, ali postiže sličan učinak.

wall-e robot

Facebook, međutim, misli da je njegov hardver i softver kohezivan i lakši za upotrebu od postojeće tehnologije. U demo snimci s vlastitim prototipom Surround 360 x24 uspio sam uočiti razlike između statičnog videozapisa od 360 stupnjeva i videozapisa s novom slobodom kretanja. Razlika je trenutna. U statičnom videu snimljenom na Kalifornijskoj akademiji znanosti mogao sam samo gledati oko sebe kao da je moja okolina statična slika razvučena u kuglu oko mene.

Međutim, u ažuriranoj verziji mogao sam pomicati ramena, naginjati se blizu predmeta i čak hodati u maloj zoni u obliku kugle. Učinak koji ovo ima na gledatelja značajan je skok razine uronjenosti, zbog čega se osjeća kao da uživo gledaju trenutak odigravanja trenutka, umjesto da jednostavno postoje unutar zaokružene snimke. To je zapravo sloboda VR-a s vjernošću stvarnog života.



Facebook-ova x24 kamera stvara masku dubine za svaki objekt u sceni. To je ono što ovim CGI leptirima omogućuje interakciju sa svjetlošću i objektima u ovoj sceni kao da su stvarni.

Foto: Facebook

Facebook kaže da će ovo imati velike implikacije na format od 360 stupnjeva, pružajući programerima mogućnost stvaranja zanimljivijih videozapisa. Čak ćete moći uređivati ​​snimke u akcijama uživo pomoću CGI slika, poput dodavanja leptira na prizor na otvorenom ili čak promjene pozadine iz oblačnog u sunčevo ili iz dnevnog u noćno vrijeme, a sve zahvaljujući podacima o svjetlosti i dubini.

Osim toga, sadržaj se može jednom snimiti i preoblikovati za različite platforme, kaže Cabral. Tako možete snimiti videozapis dizajniran za Rift slušalice i pustiti ga da radi na Gear VR-u ili čak na zaslonu pametnog telefona koji mu pristupa putem mobilne aplikacije Facebook. Svakim korakom prema dolje gubite značajke poput praćenja glave i tijela i šest stupnjeva slobode. Ali vjernost komprimirane slike ostaje kvalitetna jer je izvorno snimljena u 8K.

Facebook se nada da će video od 360 stupnjeva postati jednako impresivan kao i VR

Poput originalne kamere, oba nova Surround 360 modela razvijena su u Facebook-ovom laboratoriju za hardver, Area 404, pod nadzorom Cabrala, koji ima bogatu računalnu grafiku i stručnost za obradu slika. Facebook je unajmio Cabrala iz Nvidije zbog njegovih inženjerskih i računalnih vidova, a on je vodio hardversko punjenje u odjelu fotoaparata tvrtke kao način za rješavanje teškog problema s piletinom i jajima pomoću video zapisa od 360 stupnjeva. Facebook ima platformu za posluživanje ove vrste video zapisa milijardama korisnika - a tvrtka za naglavne slušalice VR prodaje tim korisnicima skupi hardver. Ipak, još uvijek nema puno ovog sadržaja. Kreatori također ne žele uložiti vrijeme, novac i napor u njegovo stvaranje ako misle da ga korisnici nikada neće doživjeti.

Upravo je zbog toga Facebook uložio resurse u izgradnju svoje serije video kamera od 360 stupnjeva, kako da kreatorima pokaže za što je tehnologija sposobna, tako i da pomogne pokrenuti immerzivni video bum koji Facebook misli da bi mogla biti budućnost. Ono što mi pokušavamo učiniti s VR-om općenito jest dovesti ljude do krivulje uronjenosti, kaže Mike Schroepfer, Facebook-ov glavni tehnološki direktor. Krajnja vizija je što bliža osjećaju da ste zapravo tamo. Zlatni standard je stvarni život.

Foto: Facebook

Dio tog napora je upoznavanje VR-a na pola puta s hvatanjem trenutaka iz stvarnog života u akcijama koje tijekom vremena uključuju blagodati virtualnih svjetova. Nismo željeli biti u kameru. Željeli smo da kreativni ljudi mogu napraviti ovaj sadržaj, kaže Schroepfer. FAcebook se nada da će ove godine pustiti kamere na tržište, ali ne otkriva cijene. (Procjenjuje se da će izvorni Surround 360 koštati oko 30.000 USD uz korištenje točnih shema tvrtke.)

jake paul vs ksi

Ipak, za tržište videozapisa od 360 stupnjeva, Cabral kaže da će kamera ove kvalitete - plus jeftinija, prijenosna verzija koju biste lakše mogli koristiti u uskim zatvorenim prostorima - pomoći da se medij pomakne naprijed. U konačnici, Facebook želi uspostaviti kreativnu normu, kaže Cabral. Postoji potpuno novi jezik koji morate snimiti. Možemo uzeti zdravo za gotovo možemo snimati u 2D. Razlog zbog kojeg želimo da vrhunski kreatori to koriste jest da podučavaju nas ostale.