ENGLISH

MSU 3D Video Capturе - съемка видео для 3D дисплеев не требующих очков

Проект: Дмитрий Ватолин
Реализация, алгоритмы: Сергей Гришин,
Карен Симонян,
Сергей Матюнин


Введение


Технологии создания трехмерного видео имеют давнюю историю. Их распространению всегда мешали несовершенство воспроизводящих устройств и сложность съемки трехмерной картинки. Первая проблема постепенно решается: уже появляются серийные модели стереоскопических мониторов, которые не требуют для просмотра ни специальных очков, ни каких-либо других дополнительных приспособлений. Трехмерная съемка по-прежнему требует дорогостоящего высококачественного оборудования, а поэтому все еще недоступна рядовому пользователю. Перед лабораторией была поставлена задача освоить съемку трехмерного видео с помощью дешевых доступных устройств - обычных web-камер.


Оборудование


Для съемки видео были использованы две web-камеры. Для демонстрации видео и настройки камер использовался монитор Spatial View 19''.

Spatial View 19''
Автостереоскопический монитор

Описание работы


При создании трехмерного эффекта данный монитор использует 5 различных ракурсов. Два из них получены непосредственно с камер, а остальные были сгенерированы с помощью разработанного нами метода преобразования стерео видео в многоракурсное (подробнее о MSU Stereo To Multiview Conversion). Аналогичная видеопоследовательность была сгенерирована для монитора, использующего 9 различных ракурсов.

Интерполяция промежуточных видов
Интерполяция промежуточных видов

Видеопотоки с камер имеют значительные отличия по яркости/балансу белого. Это может привести к возникновению артефактов преобразования, поэтому необходима предобработка. Для этого был разработан фильтр, который в полуавтоматическом режиме сглаживает различия в цветопередаче камер.

Коррекция цветов
Коррекция цветов

Screenshot


Кадр из видеопоследовательности (5 ракурсов)
Кадр для 5 ракурсов
Кадр из видеопоследовательности (9 ракурсов)
Кадр для 9 ракурсов

Как смотреть 3D изображения


Для просмотра 3D изображения вам потребуется автостереоскопический монитор и специализированный плеер. В зависимости от того, сколько ракурсов поддерживает Ваш монитор, Вам необходимо скачать видео с 5-ю или 9-ю ракурсами. Кроме того, при просмотре имеет значение порядок ракурсов: от левого к правому или от правого к левому. Нужно выбрать тот порядок ракурсов, который поддерживается вашим плеером.

Расположение 5 ракурсов: Расположение 9 ракурсов:
Расположение 5 ракурсов. От левого к правому. Расположение 9 ракурсов. От левого к правому. Расположение 9 ракурсов. От правого к левому.
От левого к правому От левого к правому От правого к левому

Выходной формат преобразования может быть задан также как набор видеопоследовательностей для каждого ракурса или другим требуемым способом.


Результаты


Была разработана методика съемки трехмерного видео с помощью веб-камер и созданы два варианта демонстрационного видеоролика: для мониторов с пятью и девятью ракурсами. Видеопоследовательности доступны для скачивания по следующим ссылкам:

MSU 3D Demo Video 5 Views. From left to right.
Frame 600

MSU 3D Demo Video 5 Views. From right to left.
Frame 600

MSU 3D Demo Video 9 Views. From left to right.
Frame 600

MSU 3D Demo Video 9 Views. From right to left.
Frame 600

Видеопоследовательности закодированы кодеком XVID.

3D видео было сгенерировано с помощью разработанного лабораторией алгоритма MSU Stereo To Multiview Conversion.


Контакты


С предложениями и замечаниями обращайтесь по адресу: 

Материалы по видео


Смотрите также материалы:
- По цветовым пространствам
- По JPEG
- По JPEG-2000