Новое слово в науке: перспективы развития : материалы междунар.
науч.–практ. конф. (Чебоксары, 10 сент. 2014 г.) / редкол.: О. Н.
Широков [и др.]. – Чебоксары: ЦНС «Интерактив плюс», 2014; – С.
223–230; – ISBN 978-5-906626-37-0.
Аннотация: за последние несколько лет объем
носителей мультимедийной информации вырос в несколько раз.
В сложившейся ситуации необходим простой и гибкий поиск
неструктурированным мультимедийных данных. В статье
предлагается обзор существующих методов ассоциативного поиска по
видео.
Ключевые слова: анализ видео; аннотирование видео;
видео-поиск; кадры; классификация видео; нечеткие дубликаты видео;
ранжирование видео; сцены; съёмки.
Существует смысловой разрыв между низкоуровневыми данными
в видео и потребностями пользователя. Тем не менее,
большинство методов поиска по видео следуют парадигме прямого
отображения низкоуровневых характеристик на смысловые понятия.
Этот подход требует предварительной обработки данных. Результаты
такого отображения не будут устойчивы. Без учета конкретной
предметной области задача кажется неразрешимой. Последнее время
стало появляться много клипов с очень схожим содержанием
(нечеткие дубликаты видео). Задача эффективной идентификации
нечетких дубликатов играет ключевую роль в задачах поиска,
защите авторских прав, и многих других. Для анализа
большого объема видео-данных применяют ассоциативный поиск.
В англоязычной литературе ассоциативный видео-поиск называют
«content based video retrieval» (CBVR) — поиск по содержимому.
Деление видео
Обнаружение границ съёмок. Извлечение ключевых кадров. Сегментация сцен. Сегментация звука Выделение признаков
Характеристики ключевых кадров. Цветa. Текстуры. Контуры. Края. Характеристики/объектов. Характеристики движения. Звуковые характеристики Анализ видео
Представление видео. Классификация видео по жанрам. Классификация видео по событиям. Классификация видео по объектам. Аннотирование видео Обработка запроса
Типы запросов. Семантические запросы. Не семантические запросы. Оценка сходства.
Сравнение характеристик. Сравнение текста. Сравнение онтологий. Оценка релевантности.
В работе упомянуты термины :
CBVR, EHD, FGSSMIL, glimpse, HMM, n-грамма, NNS, OCR, SKC, Sphinx-, YouTube, аgrep, байесовская оптимизация,вытеснение, гауссовы модели, интонация, кадрик, кинематографический кадр, ключевой кадр, монтажный план, мультимедийный поток, нечеткие дубликаты, обратная связь: неявная, обратная связь: псевдообратная, обратная связь: явная, обучение без учителя, обучение полуконтролируемое, , оптический поток, оптическое распознавание текста,поиск ближайшего соседа, просодия, распознавание речи, распознавание текста, склейка, скрытые Модели Маркова, ссылочный кадр, суффиксное дерево, съёмка, фильтры Габора, фотографический кадр, функция ханна, цветовая гистограмма, цветовая коррелограмма, цветовой момент.
Обнаружение границ съёмок. Извлечение ключевых кадров. Сегментация сцен. Сегментация звука Выделение признаков
Характеристики ключевых кадров. Цветa. Текстуры. Контуры. Края. Характеристики/объектов. Характеристики движения. Звуковые характеристики Анализ видео
Представление видео. Классификация видео по жанрам. Классификация видео по событиям. Классификация видео по объектам. Аннотирование видео Обработка запроса
Типы запросов. Семантические запросы. Не семантические запросы. Оценка сходства.
Сравнение характеристик. Сравнение текста. Сравнение онтологий. Оценка релевантности.
CBVR, EHD, FGSSMIL, glimpse, HMM, n-грамма, NNS, OCR, SKC, Sphinx-, YouTube, аgrep, байесовская оптимизация,вытеснение, гауссовы модели, интонация, кадрик, кинематографический кадр, ключевой кадр, монтажный план, мультимедийный поток, нечеткие дубликаты, обратная связь: неявная, обратная связь: псевдообратная, обратная связь: явная, обучение без учителя, обучение полуконтролируемое, , оптический поток, оптическое распознавание текста,поиск ближайшего соседа, просодия, распознавание речи, распознавание текста, склейка, скрытые Модели Маркова, ссылочный кадр, суффиксное дерево, съёмка, фильтры Габора, фотографический кадр, функция ханна, цветовая гистограмма, цветовая коррелограмма, цветовой момент.