Попади в дополненную реальность от Google

Специалисты из Google Creative Lab представили новый эксперимент с дополненной реальностью: программа Move Mirror превращает движения человека в гифку из фотографий с людьми в таких же позах, как у него. Интернет-издание Medialeaks испытал попробовали разработку и поделились опытом.

Разработчики Джейн Фридхофф и Ирен Альварадо представили новый проект от Google Creative Lab — программу Move Mirror, которая позволяет записывать свои движения и создавать копию получившегося ролика с помощью библиотеки из 80 тысяч изображений. Пользователю просто нужно зайти на сайт проекта и включить веб-камеру.

Move Mirror распознает движения пользователя с помощью системы PoseNet, которая отслеживает расположение рук, ног, головы и очертаний туловища. Затем специальный алгоритм сопоставляет каждый кадр и изображениями из библиотеки фотографий с людьми, стоящими в разных позах.

Алгоритм распознавания движений позволяет отслеживать действия пользователей даже на размытых изображениях, видео низкого качества и черно-белых картинках, утверждают создатели в издании Medium. Данные не передаются в интернет, весь процесс происходит в памяти компьютера пользователя.

Попасть в дополненную реальность очень просто: достаточно зайти на сайт проекта и разрешить ему задействовать веб-камеру устройства. Move Mirror тут же подбирает картинки, похожие на то, что он видит — правда, его библиотека не рассчитана на близкую съемку лиц, так что в правой части экрана будут появляться случайные фотографии.

Этот проект, который выглядит как обычное развлечение, должен позволить лучше отработать алгоритмы распознавания движений. На данном этапеMove Mirror имеет неточности в работе, но нейросетевой алгоритм программы постоянно обучается, и со временем станет работать гораздо лучше.

Поиграться с дополненной реальностью самому можно на сайте Move Mirror, только понадобится просторная комната с ярким освещением и хорошая веб-камера.