После
После вчерашнего поста Даня Криворучко пришел в коменты и там даже случилась дискуссия по поводу извлечения глубины нейросетками.
А сегодня подглядел у Нейронавтика пост про Depth Anything.
На демках, конечно, все сладко, особенно если подсовывать туда булки и полки, у которых гладкие края, уходящие вглубь кадра.
Я взял пару картинок от Дани и скормил их в новоиспеченное демо Depth Anything.
https://huggingface.co/spaces/Xenova/depth-anything-web
Скормите и вы, это не требует питонгования. Но дает представление о том, как сейчас нейросетки тащат глубину из кадра. И на каких картинках можно рассчитывать на интересный результат (крупные, гладкие объекты, спокойный фон), а на каких будут артефакты (шум, мелкодетальность) и проблемы при анимации.
Впрочем, это азы композа, которые приходят к нам благодаря нейросеткам.
Из интересного, все это добро можно прикручивать к своим [веб]-приложениям, благодаря интеграции с transformers.js
https://github.com/xenova/transformers.js/releases/tag/2.14.1
И не забудьте заглянуть сюда:
https://huggingface.co/spaces/Xenova/doodle-dash
Пример того, как можно вкручивать это хозяйство в веб.
А сегодня подглядел у Нейронавтика пост про Depth Anything.
На демках, конечно, все сладко, особенно если подсовывать туда булки и полки, у которых гладкие края, уходящие вглубь кадра.
Я взял пару картинок от Дани и скормил их в новоиспеченное демо Depth Anything.
https://huggingface.co/spaces/Xenova/depth-anything-web
Скормите и вы, это не требует питонгования. Но дает представление о том, как сейчас нейросетки тащат глубину из кадра. И на каких картинках можно рассчитывать на интересный результат (крупные, гладкие объекты, спокойный фон), а на каких будут артефакты (шум, мелкодетальность) и проблемы при анимации.
Впрочем, это азы композа, которые приходят к нам благодаря нейросеткам.
Из интересного, все это добро можно прикручивать к своим [веб]-приложениям, благодаря интеграции с transformers.js
https://github.com/xenova/transformers.js/releases/tag/2.14.1
И не забудьте заглянуть сюда:
https://huggingface.co/spaces/Xenova/doodle-dash
Пример того, как можно вкручивать это хозяйство в веб.
Источник: Метаверсище и ИИще
2024-01-31 15:00:37