Keyframer: Empowering Animation Design using Large Language Models....

Keyframer: Empowering Animation Design using Large Language Models

Не люблю постить про голые бумаги без кода и демо. Но тут, во-первых, анимация. Во-вторых, на входе вектора (SVG), в-третьих авторы - Apple, USA.

Apple Keyframer, инструмент для создания анимации статичных изображений (SVG) с помощью естественного языка. Созданный на основе интервью с профессиональными дизайнерами и инженерами-аниматорами, Keyframer поддерживает создание и доработку анимации с помощью комбинации подсказок и прямого редактирования сгенерированных результатов. Система также позволяет пользователям запрашивать варианты дизайна для постоянных экпериментов.

И вот тут упор на постоянный интерактив и петлю обратной связи:

"пользователи постоянно адаптируют свои задачи в ответ на сгенерированный результат, а прямое редактирование вместе с подсказками обеспечивает итерацию за пределами интерфейсов с одноразовыми подсказками, распространенных в генеративных инструментах сегодня. Благодаря этой работе мы предлагаем, как LLM могут расширить возможности различных аудиторий в создании анимации."

Ну то есть, у вас есть векторные шейпы, вы можете покричать на них промптами для анимации, потом поправить результат ручками(!), снова поорать в монитор, и так далее.

Очень любопытно будет посмотреть.
Пока посмотреть можно только на скриншоты тут:
https://arxiv.org/pdf/2402.06071.pdf