NVIDIA показа невронна мрежа, която превръща 2D изображения в 3D обекти

NVIDIA, заедно с експерти от Станфордския университет, финализира невронната мрежа EG3D, която е в състояние да генерира реалистични триизмерни изображения на базата на плоски 2D изображения.

Технологията е била демонстрира на примера на портрети на хора и муцуни на котки. Във всички случаи обемното изображение беше доста реалистично, с правилни пропорции и без видими артефакти.

За да създаде триизмерен модел, невронна мрежа генерира поредица от двуизмерни изображения, използвайки генеративни противопоставящи се мрежи, и след това създава 3D обект въз основа на тях.

Разработчиците отбелязват, че EG3D работи много по-бързо и по-точно от аналозите и не изисква колосална изчислителна мощност - можете да го използвате дори на лаптопи с топ игри видео карти. Например, всичко работи добре с GeForce RTX 3090.

Невронната мрежа вече е достъпна за самотестване - достъпни са изходният код и инструкциите за инсталиране на GitHub.

През март специалистите на NVIDIA демонстрира подобна невронна мрежа Instant NeRF, която залепва серия от 2D снимки и завършва картината до триизмерна сцена. Наричат ​​го „Полароид на бъдещето“.