Apple разкриха метод за бързо и ефективно създаване на тридневни сцени с помощта на изкуствен интелект

Apple + Университетът от Гонконг представиха технологията LGTM – по-ефективно рисуване на 3‑D сцени

Учёни от Apple, в сътрудничество с изследователи от Университета от Гонконг, разработват система наречена LGTM (Less Gaussians, Texture More). Тя позволява значително да се подобри качеството на рендериране на триизмерни пространства с висока резолюция без нужда от увеличаване на изчислителните ресурси.

Как работи LGTM
1. Разделяне на сложността

Традиционните методи за рисуване на 3‑D сцени, базирани на функции Гаус или други подходи, изискват квадратично увеличение на разходите при повишаване на резолюцията. LGTM „отделя“ геометричната структура на сцената от нейните визуални детайли.

2. Два етапа обучение

* Първият стъпка – моделът изгражда проста геометрия (каркас) върху изображения с ниска резолюция.
* Вторият стъпка – той сравнява каркаса със оригиналните висококачествени картинки, а след това се обучава да създава детайлни текстури, които се налепват върху простия каркас.

3. Резултат

При рендериране в резолюции 2 K и 4 K получаваме точен резултат без артефакти и „празни“ участъци, но при това ресурсите не растат квадратично.

Практическа стойност
* VR/AR – технологията е особено полезна за системи виртуална и разширена реалност.

* Apple Vision Pro има обща резолюция на дисплеите от 23 мегапиксела, което обикновено изисква огромни изчислителни мощности. LGTM позволява възпроизвеждане на детайлни сцени в 4K без такова увеличение на ресурсите, правейки възможна по-гладка и качествена работа.

Така че, LGTM представлява значителен напредък в рендерирането на висококачествени 3‑D сцени, запазвайки ефективността на изчисленията.