Пятница, 18 сентября 2020 16 +   Регистрация   Подписка на обновления  RSS  Обратная связь
17:12, 22 декабря 2018

Photo Wake-Up: метод анимирования персонажей на картинах


Команда исследователей Вашингтонского университета и Facebook создала алгоритм Photo Wake-Up, который анимирует персонажей на плоских изображениях: фотографиях, рисунках, комиксах, граффити и даже картинах Пикассо.

Как работает

Photo Wake-Up создает 3D-фигуру персонажа на картине, после чего анимирует её, создавая эффект выбегания за пределы кадра. Полученную анимацию можно увидеть на мониторе, воспроизвести как видео и посмотреть в дополненной реальности. Например, с помощью очков HoloLens, можно увидеть, как персонаж выбегает из картины, с разных точек обзора.

Алгоритм

Разработчики применяют разные алгоритмы для обнаружения людей на фото, сегментации и оценки позы. Сеть Mask R-CNN используется для обнаружения человека и отделения фигуры от фона, затем следующий алгоритм проводит оценку 2D-позы.

На базе полученной 2D-модели фигуры создается 3D-модель. Для этого разработчики используют SMPL — реалистичную трехмерную модель человеческого тела, которая изменяется по форме фигуры с исходного изображения. На полученную модель PatchMatch накладывает текстуры.

Еще один алгоритм использует реалистичные текстуры, чтобы заполнить сегменты фото, на которых до этого находилась фигура.


Обзор метода

Посмотрите примеры анимации, созданные разработчиками:

В дальнейшем исследователи собираются расширять возможности анимации изображений. Они также видят применение своего метода в создании реалистичных 3D аватаров в дополненной реальности.

Интересные статьи

  • Анатомически верная анимация из одного изображения
  • Кто захватит рынок AR и VR к 2022 году — Microsoft, Sony, Google?
  • Стартап создает AR-аватары для соцсетей. Они распознают объекты, голосовые команды и эмоции

Источник: neurohive.io
Telegram: Подписаться

0
Поделиться в соцсетях:

Об авторе: Dmitry Yoda

Помимо силы, мастер Йода очень увлекался блокчейном.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Нажимая кнопку [ОТПРАВИТЬ КОММЕНТАРИЙ], Вы соглашаетесь на сбор и обработку своих персональных данных и подтверждаете ознакомление с политикой конфиденциальности!!!

Мы в соцсетях:
О проекте
Реклама и сотрудничество
Обратная связь
Поддержать проект

© 2017-2020 RuHash#
Интернет-медиа о мире высоких технологий

Новости, исследования, интересные события в мире науки и высоких технологий.
Актуальные темы: искусственный интеллект, блокчейн, нанотехнологии, роботы, нейронные сети, квантовый мир.

Дизайн и поддержка: GoodwinPress.ru


Политика конфиденциальности

Материалы, представленные на данном сайте, не являются офертой или рекомендацией к покупке или продаже каких-либо активов.
Копирование и распространение материалов с сайта ruhash.com разрешено только с указанием активной ссылки на RuHash#
как на источник. Указание ссылки является обязательным при копировании материалов в социальные сети или печатные издания.

Авторизация
*
*
Регистрация
*
*
*
Пароль не введен
captcha
Генерация пароля