Методы создания фоновых изображений и их использование при конвертации 2D-видео в 3D-формат


https://doi.org/10.15217/issnl684-8853.2017.3.11

Полный текст:


Аннотация

Постановка проблемы: технология конвертации 2В-видео в ЗВ-формат включает в себя две трудоемкие операции, выполнение которых, как правило, требует больших затрат ручного труда. К этим операциям относятся заполнение областей открытия, возникающих в результате смещения объектов сцены, обусловленного параллаксом, и выделение силуэтов объектов сцены путем семантической сегментации изображений конвертируемой последовательности кадров в процессе создания карты глубины. Цель исследования: разработка методов получения фоновых изображений конвертируемых последовательностей кадров и на их основе технологий заполнения областей открытия и выделения силуэтов изображений движущихся объектов. Результаты: разработаны методы создания фоновых изображений: метод предварительной съемки фонового изображения той же камерой, которая используется для съемки клипа; метод поиска фонового изображения в отснятом клипе и метод монтажа фонового изображения из фрагментов клипа для различных направлений движения объекта, - а также метод заполнения областей открытия, возникающих при конвертации 2В-изображений клипа в ЗВ-формат, с использованием для этой цели фонового изображения и метод выделения силуэтов изображенийдвижущихся объектов, необходимыхдля создания карты глубины, из последовательности кадров клипа путем сопоставления изображений последовательности с фоновым изображением. Практическая значимость: разработанные методы позволяют при конвертации 2В-видео в ЗВ-формат сокращать трудоемкость процесса в десятки и более раз.

Об авторах

Николай Николаевич Красильников
Санкт-Петербургский государственный университет аэрокосмического приборостроения
Россия


Ольга Ивановна Красильникова
Санкт-Петербургский государственный университет аэрокосмического приборостроения
Россия


Список литературы

1. Ватолин Д. С., Боков А. А., Федоров А. А. Тенденции изменения технического качества стереокино - 5 лет после «Аватара» // Мир техники кино. 2015. № 3(37). С. 17-28.

2. Real 3D or Fake 3D. http://realorfake3d.com/ (дата обращения: 15.05.2017).

3. Ерофеев М. В., Ватолин Д. С. Многослойное решение проблемы полупрозрачных границ при построении стереоскопических изображений // Intern. Journal of Open Information Technologies. 2016. N 8(4). http://istina.msu.ru/media/ publications/arti-cle/854/979/27852059/310-900-1-PB.pdf. (дата обращения: 15.05.2017).

4. Acharya T., Tsai P. S. Computational Foundations of Image Interpolation Algorithms // ACM Ubiquity. 2007. N 8. http://ubiquity.acm.org/article.cf-m?id=1317488 (дата обращения: 15.05.2017).

5. Красильников Н. Н., Красильникова О. И. Методы конвертации 2D-изображений и видео в стереоскопический формат // Информационно-управляющие системы. 2015. № 5. С. 18-25. doi:10.15217/ issn1684-8853.2015.5.18

6. Красильников Н. Н., Красильникова О. И. Исследование восприятия 3D-объектов зрительной системой человека для разработки методов конвертации 2D-изображений в стереоскопические изображения // Оптический журнал. 2015. № 10(82). С. 1-8.

7. Newson A., Almansa A., Fradet M., Gousseau Y., Perez P. Video Inpainting of Complex Scenes // SIAM Journal on Imaging Sciences. 2014. N 4(7). P. 19932019. doi:10.1137/140954933

8. Ерофеев М. В., Ватолин Д. С. Матирование видеопоследовательностей с использованием восстановленного фона // Цифровая обработка сигналов. 2016. № 3. С. 19-25.

9. Wang J., Cohen M. F. Image and Video Matting: a Survey // Foundations and Trends® in Computer Graphics and Vision. 2007. N 2(3). P. 97-175. doi:10.1561/0600000019

10. Rhemann C., Rother C., Wang J., Gelautz M., Kohli P., Rott P. A Perceptually Motivated Online Benchmark for Image Matting // Computer Vision and Pattern Recognition: Proc. IEEE Computer Society Conf. on Computer Vision and Pattern Recognition (CVPR 2009), Miami, Florida, USA. 2009. P. 1826-1833. doi:10.1109/ CVPR. 2009.5206503

11. Lee S.-Y., Yoon J.-C., Lee I.-K. Temporally Coherent Video Matting // Graphical Models. 2010. N 3(72). P. 25-33. doi:10.1016/j.gmod.2010.03.001

12. Красильников Н. Н. Цифровая обработка 2D- и 3D-изображений. - СПб.: БХВ-Петербург, 2011. - 608 с.


Дополнительные файлы

Для цитирования: Красильников Н.Н., Красильникова О.И. Методы создания фоновых изображений и их использование при конвертации 2D-видео в 3D-формат. Информационно-управляющие системы. 2017;88(3):11-17. https://doi.org/10.15217/issnl684-8853.2017.3.11

For citation: Krasilnikov N.N., Krasilnikova O.I. Creating Background Images and their use in Converting 2D Video into 3D Format. Information and Control Systems. 2017;88(3):11-17. (In Russ.) https://doi.org/10.15217/issnl684-8853.2017.3.11

Просмотров: 33


Creative Commons License
Контент доступен под лицензией Creative Commons Attribution 4.0 License.


ISSN 1684-8853 (Print)
ISSN 2541-8610 (Online)