Цей алгоритм створює 3D-анімацію з одного нерухомого зображення

«Пробудження фото»

Чунг-І Венг, аспірант Вашингтонського університету, і деякі з його друзів створили щось справді дивне.

Їх програмне забезпечення, зване «Photo Wake-Up», дозволяє анімації персонажів просто «йти» з рамки статичного зображення - не полишаючи діри в картині позаду них. Результати були опубліковані в недавно представленому документі.

Метод Вена визначає в якості вхідних даних двомірний об'єкт на одній фотографії та створює тривимірну анімовану версію цього об'єкта. Анімація може «йти, бігати, сидіти або стрибати в 3D».

І це може перевизначити спосіб взаємодії з фотографіями. «Ми вважаємо, що цей метод не тільки дає людям нові можливості отримувати задоволення від фотографій і взаємодіяти з ними, а й пропонує шлях для відновлення віртуального аватара з одного зображення», - пояснюють Вен і його співробітники в статті.

Як магія

Ефект, як видно з відео нижче, дивний, хоча і викликає неприємні відчуття. Легенда баскетболу, Стівен Каррі, зауважує, що він стрибає в дію і біжить прямо зі своєї фоторамки Одне з сюрреалістичних творів Пікассо прекрасно вирізає зі своєї рамки, залишаючи картину в такті.

Щоб ефект працював правильно, все, що потрібно програмному забезпеченню Венга, - це нерухомий кадр з силуетом. Він вирізає 2D-фігуру і деформує її навколо 3D-скелета, який їй відповідає.

Велике поліпшення

Дослідники намагалися створити подібний ефект в минулому, але результати були набагато менш вражаючими. Новий підхід Відень додає важливу нову здатність: він може ідентифікувати різні частини тіла, такі як руки і ноги, і деформувати кожну окремо таким чином, щоб точно відповідати 2D-вирізу.

Програмне забезпечення працює навіть в доповненої реальності і може змінити нашу взаємодію з двовимірними творами мистецтва в наступний раз, коли ми відвідаємо художню галерею.

Джерела: Огляд технологій MTІ