NVIDIA'нын жаңы NeRF Технологиясы Метаверсти баштоого жардам берет

Мазмуну:

NVIDIA'нын жаңы NeRF Технологиясы Метаверсти баштоого жардам берет
NVIDIA'нын жаңы NeRF Технологиясы Метаверсти баштоого жардам берет
Anonim

Негизги алып салуулар

  • Nvidia жакында эле 2D сүрөттөрдү секунданын ичинде 3D көрүнүшүнө айландырган техниканы көрсөттү.
  • Усул реалдуу дүйнөдө жарыктын кандайча иштешин болжолдоо үчүн компьютердин күчүн колдонот.
  • Метаверс - бул 3D көрүнүштөр пайдалуу, анткени аларды каалаган камеранын көз карашынан көрүүгө болот.
Image
Image

Nvidia'нын жаңы жасалма интеллект (AI) технологиясы жакында 2D сүрөттөрдү секунданын ичинде 3D көрүнүштөрүнө айлантып, метаверс сыяктуу иммерсивдүү виртуалдык мейкиндиктерди түзүүнү текстти иштетүү сыяктуу эле анча маанилүү эмес кыла алат.

Nvidia жакында эле Instant NeRF деп аталган фото ыкмасын көрсөттү, ал реалдуу дүйнөдө жарыктын өзүн болжолдоо үчүн эсептөө күчүн колдонот. Ал эски сүрөттөрүңүздү видео оюн сахнасына айландырышы мүмкүн же аны роботторду жана өзү айдаган унааларды реалдуу дүйнөдөгү объекттердин өлчөмүн жана формасын түшүнүүгө үйрөтүү үчүн колдонсо болот.

"3D сүрөттөө трансформациянын жаңы дүйнөсүн алып келет", - деди Nvidia платформасында 3D алгоритмдерин иштеткен Visionary.ai компьютердик көрүү компаниясынын башкы директору Орен Дебби Lifewireге электрондук кат аркылуу берген маегинде. "3D колдонуу менен, сиз сахнанын чыныгы тереңдигин туурап, сүрөттү жандуураак жана реалдуу кылып көрсөтөсүз. AR/VR жана өнөр жай камераларынан тышкары, 3D абдан кеңири таралган, биз азыр анын дээрлик бардык смартфондордо колдонулуп жатканын көрүп жатабыз. колдонуучу билет."

Өлчөмдөрдү кошуу

75 жыл мурун Polaroid камерасы менен тартылган биринчи заматта сүрөт 3D дүйнөсүн 2D сүрөттөлүштө тез тартууну максат кылган. Эми AI изилдөөчүлөрү тескерисинче иштеп жатышат: кыймылсыз сүрөттөр жыйнагын секунданын ичинде санарип 3D көрүнүшүнө айлантуу.

Тескери рендеринг катары белгилүү болгон процесс AIны колдонуп, жарыктын реалдуу дүйнөдө өзүн кандай алып жүрөрүн болжолдоп, изилдөөчүлөргө ар кандай бурчта тартылган бир нече 2D сүрөттөрүнөн 3D көрүнүшүн кайра курууга мүмкүндүк берет. Nvidia бул тапшырманы дароо аткара турган ыкманы иштеп чыкканын ырастайт.

Nvidia бул ыкманы нейрон нурлануу талаалары же NeRF деп аталган жаңы технология менен колдонгон. Компаниянын айтымында, Instant NeRF деп аталган натыйжа бүгүнкү күнгө чейин эң тез NeRF техникасы. Модель бир нече ондогон кыймылсыз сүрөттөрдү үйрөнүү үчүн бир нече секундду талап кылат жана андан кийин пайда болгон 3D көрүнүштү ондогон миллисекунддарда көрсөтө алат.

"Эгерде көп бурчтуу торлор сыяктуу салттуу 3D сүрөттөлүштөр вектордук сүрөттөргө окшош болсо, NeRFs битмап сүрөттөрү сыяктуу: алар объекттен же көрүнүштүн ичинде жарыктын таралышын жыш тартып алышат," Дэвид Любке, графикалык изилдөө боюнча вице-президент. Nvidia пресс-релизинде мындай деп айтылат: "Ошол мааниде Instant NeRF 3D үчүн санарип камералар жана JPEG кысуу 2D сүрөткө тартуу сыяктуу маанилүү болушу мүмкүн - 3D сүрөткө тартуунун жана бөлүшүүнүн ылдамдыгын, жеңилдигин жана жеткиликтүүлүгүн кыйла жогорулатат.”

NeRFти камсыздоо үчүн маалыматтарды чогултуу үчүн нейрон тармагы бир нече ондогон сүрөттөрдү, ошондой эле ал кадрлардын ар биринин камерасынын абалын тартууну талап кылат.

NeRF кичинекей нейрон тармагын 3D мейкиндигинин каалаган чекитинен каалаган тарапка тараткан жарыктын түсүн алдын ала айтуу менен сахнаны кайра курууга үйрөтөт.

3D чакырыгы

Метаверс - бул 3D көрүнүштөр пайдалуу болгон аймак, анткени аларды каалаган камеранын көз карашынан көрүүгө болот, - деди Брэд Квинтон, кеңейтилген реалдуулук үчүн Perceptus платформасынын негиздөөчүсү (AR) Lifewireге электрондук маегинде. Реконструкцияланган 3D көрүнүшү менен чыныгы жашоодо бөлмөнү аралап басып, анын мазмунун ар түрдүү бурчтардан көрө алганыбыздай эле, биз мейкиндикти виртуалдык түрдө жылдырып, аны каалаган көз караштан көрө алабыз.

Image
Image

Бул өзгөчө виртуалдык реалдуулукта колдонуу үчүн чөйрөлөрдү түзүү үчүн пайдалуу болушу мүмкүн, - деди Квинтон.

Apple's Object Capture сыяктуу программалар 2D сүрөттөрдүн сериясынан виртуалдык 3D объектилерин түзүү үчүн фотограмметрия деп аталган ыкманы колдонушат. 3D моделдери виртуалдык реалдуулукта жана AR тиркемелеринде кеңири колдонулат, деп болжолдогон Квинтон. Мисалы, Perceptus AR платформасындагы сыяктуу кээ бир AIлар реалдуу дүйнөнү түшүнүү үчүн 3D моделдерин колдонушат, бул реалдуу убакытта AR колдонмолоруна мүмкүнчүлүк берет.

3D сүрөттөрдү колдонуу сахнадагы чыныгы дүйнөнүн тереңдигин туурап, сүрөттү жандуураак жана реалдуураак кылат, дейт Дебби. Боке эффектин түзүү үчүн (башкача айтканда, портрет режими же кинематографиялык режим) 3D тереңдик картасын түзүү керек. Техника дээрлик бардык смартфондордо колдонулат.

"Бул мурунтан эле кино тартып жаткан профессионал видеографтар үчүн стандарт жана бул ар бир керектөөчү үчүн стандартка айланып баратат", - деп кошумчалады Дебби.

Сунушталууда: