Танцевальный аниматор с искусственным интеллектом применяет генеративный искусственный интеллект к хореографии

Прочитано: 259 раз(а)


Исследователи из Стэнфордского университета разработали генеративную модель искусственного интеллекта, которая может ставить анимацию человеческого танца в соответствии с любым музыкальным произведением. Это называется Editable Dance GENeration ( EDGE ).

«EDGE показывает, что персонажи с искусственным интеллектом могут привнести в танцевальную анимацию такой уровень музыкальности и артистичности, который раньше был невозможен», — говорит Карен Лю, профессор компьютерных наук, возглавлявшая команду, в которую входили два студента, Джонатан Ценг и Родриго Кастельон. , в ее лаборатории.

Исследователи считают, что этот инструмент поможет хореографам создавать последовательности и передавать свои идеи живым танцорам, визуализируя танцевальные последовательности в 3D. Ключом к расширенным возможностям программы является возможность редактирования. Лю считает, что EDGE можно использовать для создания компьютерных анимационных танцевальных сцен, позволяя аниматорам интуитивно редактировать любые части танцевального движения.

Например, аниматор может спроектировать определенные движения ног персонажа, а EDGE «автоматически дополнит» все тело из этого положения реалистичным, цельным и физически правдоподобным способом — человек может выполнять движения. Прежде всего, движения соответствуют выбранной аниматором музыке.

Как и другие генеративные модели для изображений и текста — например, ChatGPT и DALL-E — EDGE представляет собой новый инструмент для генерации хореографических идей и планирования движений. Редактируемость означает, что танцоры и хореографы могут многократно улучшать свои последовательности движение за движением, положение за положением, добавляя определенные позы в определенные моменты. Затем EDGE автоматически включает дополнительные детали в последовательность. В ближайшем будущем EDGE позволит пользователям вводить собственную музыку и даже демонстрировать свои движения перед камерой.

«Мы думаем, что это действительно веселый и увлекательный способ для всех, а не только для танцоров, выразить себя через движение и задействовать собственное творчество», — говорит Лю.

«С его способностью генерировать захватывающие танцы в ответ на любую музыку мы считаем, что EDGE представляет собой важную веху на пересечении технологий и движения», — добавляет Ценг. «Это откроет новые возможности для творческого самовыражения и физической активности», — говорит Кастельон.

Команда опубликовала документ и официально представит EDGE на конференции Computer Vision and Pattern Recognition в Ванкувере, Британская Колумбия, в июне. Существует также веб-сайт под названием «EDGE Playground», где любой желающий может выбрать мелодию и посмотреть, как EDGE создает новую танцевальную последовательность с нуля.

Танцевальный аниматор с искусственным интеллектом применяет генеративный искусственный интеллект к хореографии



Новости партнеров