Нейролента - подборка новостей о нейронных сетях, ChatGPT

Про DeemosTech, их

Про DeemosTech, их Чатаватаров и Родена (Rodin GEN-1) я уже писал пару раз. Слежу за ними внимательно. У них там много народа, а не пара аспирантов.

Они выкатили демо нового Rodin GEN-1 для генерации 3Д из картинки. Выглядит нарядно, видно, что деталей стало больше, но видео явно черипикнутое и есть пара моментов.

1. Все равно объекты "мылятся" по краям и острым граням. Это родовая проблема неявных поверхностей, ведь задирать разрешение до мегасканов будет дорого. Эти фасочки всегда будут сглаживать любой объект, пока туда не придет ИИ и не скажет "вот тут угол", делаем по другому.

2. Гонку за деталями с таким подходом не выиграть у Гауссианов, которые благодаря свое микрополигонистости всегда будут впереди. Вон недавно вышли Гауссианы на стероидах с упором на детали:
GES: Generalized Exponential Splatting for Efficient Radiance Field Rendering.

А вот тут Гауссианами генерят целые сцены:
GALA3D: Towards Text-to-3D Complex Scene Generation via Layout-guidedGenerative Gaussian Splatting.

Но проблема в том, что из при попытке получить из Гауссианов полигональные меши, вы опять будете получать замыленные края.

Так что либо детали в неведомой гауссовой хрени, либо старые добрые, но обмылочные полигоны.

3. Я записался в вейтлист в Димос и написал им, что без ретопологии будет нещитово.

4. Ну и фу такими быть "The #Sora Moment in #3D has never been close" - пиариться на успехе Соры - ну такое.
Кроме того, очень может статься, что ответ SORA всем этим 3Д-ИИ-генераторам может быть очень жоским и в один день умрут вот эти вот все 2D-to-3D.

В общем на поляне генерации 3Д вот-вот будет интересный прорыв и придет он из геймдева.

Пока это улучшатели улучшателей.

Но DeemosTech интересные, поглядите за ними:

https://twitter.com/i/status/1760008401621483665