Алгоритм deepstereo склеивает снимки google street view в гладкое видео

Алгоритм deepstereo склеивает снимки google street view в гладкое видео

Исследователи компании Гугл Джонн Флинн, Айван Нюландер, Джеймс Филбин и Ной Снейвли создали метод, что способен комбинировать снимки из сервиса обзора панорамных видов улиц Street View в ровные видеоролики с чуть заметными артефактами. Метод стал называться DeepStereo, пример его работы представлен выше. Возможное применение созданной разработке включает создание несложных анимаций, обработку изображений, кино и виртуальную реальность.
Смотрите кроме этого: В Гугл Street View показались подводные изображения закрытых островов Бразилии

Гугл обновила Гугл Street View, добавив в него виды с островов Бразилии, включая подводные фототуры. На изображениях возможно заметить пляжи, водопады, дельфинов и черепах на островах, находящихся под защитой ЮНЕСКО и закрытых для туристов. Street View — это один из немногих способов заметить острова архипелага Фернанду-ди-Норонья и атолл Рокас. На этих островах отмечены наибольшие в Западной Атлантике скопления морских тропических птиц, громадная популяция дельфинов.

Из-за фауны и уникальности флоры ЮНЕСКО в 2001 году причислила эти острова к монументам Глобального наследия.

Не всегда вероятно адекватно оценить некое место лишь по картам либо цифровым снимкам. взглянуть на улицу с высоты чуть выше людской роста оказывают помощь сервисы по типу Гугл Street View.

Но это склеенные в панораму фотографии, а не видеоролики.В случае если необходимо создать анимацию перемещения вперёд из отдельных снимков, то ответ последовательность изображений не подойдёт — оно окажется через чур стремительным, потому, что картины будут изменяться с частотой как минимум 24 кадра в секунду. При проезда по широкой ровной дороге либо шоссе возможно создать хорошую анимацию в стиле замедленной съёмки.

Но в Гугл Street View имеется витиеватых улочек и панорамы музеев — таймлапс из стремительной смены кадров тут не окажется. Необходимы недостающие изображения между снимками. Этим и занимается созданный метод.Команда исследователей применяла широкие знания компании в обучении метода. На входе имеется комплект изображений с некоторых точек, а целью есть создание новых кадров с вторых точек.

Правильное ответ данной задачи требует построения 3D-модели окружения, что значительно чаще нереально из-за преград. Задача не нова. Кое-какие прошлые способы владеют проблемами, каковые приводят к появлению разрывов около барьеров, алиасингу и размытию.

Особые сложности приводят к деревам и другие объекты, отдельные элементы которых смогут закрывать вид.Новый способ команды Флинна применяет обучение метода компьютерного зрения чтобы он имел возможность осознать, какие конкретно объекты должны быть в недостающих кадрах. Для обучения употреблялись комплекты изображений с двигающегося автомобиля.

Исследователи заявляют, что количество базы для обучения составил 100 тысяч комплектов изображений.После этого проводилось тестирование с применением последовательностей из трёх снимков из аккумуляторная Street View. Метод заставляли обработать два крайних изображения и представить вариант промежуточного. Сравнение с оригиналом разрешало оценить работу.Конечный итог DeepStereo команда именует правдоподобным. С первого взора его не так легко отличить от настоящей фотографии.

Заметные артефакты включают пропадание и лёгкую потерю разрешения узких структур на переднем замысле. Объекты со сложной структурой, которая перекрывает собственные подробности, смогут оказаться в размытом виде. Метод кроме этого не в состоянии создать поверхности, которых нет в уникальных снимках. Перемещающиеся объекты (пешеходы, автомобили) намеренно размыты, дабы создать эффект перемещения.Для рендеринга требуется внушительная вычислительная мощь.

Для только одного изображения разрешением 512?512 пикселей требуется приблизительно 12 мин. работы многоядерной совокупности с неназванными характеристиками. Создание изображений большего разрешения требует через чур много оперативной памяти. Исследователи высказывают надежды по оптимизации метода с возможностью сокращения времени рендеринга до нескольких мин. либо кроме того секунд при применении процессоров видеокарт. В возможности при большой доработке функционирование метода на GPU вероятно кроме того в настоящем времени.По данным текста изучения и MIT Technology Review. arXiv:1506.06825 [cs.CV]

Случайная статья:

Viewmake Editor for Google Street View


Похожие статьи:

Комментирование и размещение ссылок запрещено.

Обсуждение закрыто.