Разработка программно-аппаратного комплекса обработки и индексации оцифрованных видео- и киноматериалов

Тема НИР

НИОКР «Разработка программно-аппаратного комплекса обработки и индексации оцифрованных видео- и киноматериалов»

Контракт

№ 2214-01-41/06-15 от 20.05.2015

Исполнитель

Акционерное общество «Творческо-производственное объединение «Центральная киностудия детских и юношеских фильмов им. М. Горького» (Филиал «Научно-исследовательский кинофотоинститут» АО «ТПО Киностудия им. М. Горького»)

Бюджет, тыс.руб.

3 500,0

Завершение проекта

30.10.2015

Подразделение заказчика

Департамент науки и образования

Цели работы

Разработка эскизного проекта программно-аппаратного комплекса обработки и индексации оцифрованных видео- и киноматериалов.

Данная работа основана на сквозном применении векторов признаков, извлекаемых из кинокадров с помощью сверточных нейронных сетей, для реализации всех функций системы индексации и поисковой системы. Это позволило добиться высокой точности поиска за счёт свойств модели сверточных нейронных сетей по извлечению семантических признаков из изображений и высокой производительности при индексации за счёт реализации параллельных вычислений на графических ускорителях с архитектурой CUDA. Высокая скорость поиска достигается благодаря граф-ориентированной структуре базы данных.

В процессе работы проведены экспериментальные исследования для разработки алгоритмов семантической индексации киноматериалов и оценки их точности и производительности.

Ключевые слова

Видеопоиск, фрагментарный поиск, перевод киноматериалов в цифровой формат, оцифровка, распознавание образов, разбиение на сцены, индексация, сверточные нейронные сети, выделение признаков, машины опорных векторов

Краткое описание, картинка, отчет

В результате выполнения НИОКР были достигнуты следующие результаты:

1) разработан новый метод сегментации фильма на сцены на основе векторов признаков, извлекаемых нейронной сетью;

2) разработан новый метод детектирования действий на основе линейной классификации векторов признаков последовательности кадров;

3) произведена программная реализация разработанных методов в виде экспериментального образца программно-аппаратного комплекса обработки и индексации оцифрованных видео- и киноматериалов;

4) выполнен анализ полученных результатов и подготовлены рекомендации по дальнейшему развитию подхода и созданию промышленной версии системы для её внедрения в эксплуатационную работу государственных и частных архивов киновидеоматериалов;

5) разработан эскизный проект на экспериментальный образец;

6) разработан заключительный отчёт о НИОКР.

Областью применения полученных результатов являются системы для индексации оцифрованных киноматериалов и организации поиска, предназначенные для обеспечения сохранности и общественного использования обязательного экземпляра аудиовизуальной продукции, перевода фондовых материалов в цифровой формат; комплектования и хранение (включая контроль технического состояния, восстановление, реставрацию) фонда законченных производством и прошедших в эфир материалов телерадиопроизводящих организаций; создания и поддержания интернет-порталов на базе архивных материалов.