Видео синопсис - Video synopsis

Рис. 1. Снимки экрана: до и после видео. 9 часов активности, суммированные в 20-секундном одновременном представлении нескольких объектов и действий, которые произошли в разное время.
Рис. 2: Упаковка трубок - схематический пример: создание сводки видео путем повторной синхронизации пространственно-временных трубок (X = 2-мерная ось XY каждого кадра).

Видео Синопсис® это одновременное представление событий, которое позволяет просматривать многочасовые видеоматериалы всего за несколько минут. Технология отслеживает и анализирует движущиеся объекты (также называемые событиями) и преобразует видеопотоки в базу данных объектов и мероприятий.[1] Video Synopsis имеет конкретные приложения в области видео аналитика и видеонаблюдение где, несмотря на технологические достижения и растущий рост использования камер видеонаблюдения (замкнутого телевидения),[2] просмотр и анализ записанных материалов по-прежнему является дорогостоящей, трудоемкой и трудоемкой задачей.

Обзор технологий

Сводка видео объединяет визуальную сводку сохраненного видео с механизмом индексации.

Когда требуется сводка, все объекты за целевой период собираются и сдвигаются во времени, чтобы создать гораздо более короткое синопсисное видео, показывающее максимальную активность. Синопсис видеоклип генерируется в реальном времени, в котором одновременно отображаются объекты и действия, которые изначально происходили в разное время.[3] (См. Рисунок 1 - Снимки экрана: до и после видеообзора).

Процесс начинается с обнаружение и отслеживание объекты интереса. Каждый объект представлен в виде трубы в пространстве-времени всех видеокадров. Объекты обнаруживаются и сохраняются в базе данных примерно в реальном времени.

После запроса суммирования периода времени все объекты за желаемый период времени извлекаются из базы данных и индексируются для создания гораздо более короткого сводного видео с максимальной активностью. (См. Рисунок 2 - Трубная набивка).

Рендеринг в реальном времени используется для генерации сводного видео после изменения времени объекта. Это позволяет конечный пользователь контроль плотности объектов / событий.

Технология Video Synopsis была изобретена профессором Шмуэлем Пелегом.[4] из Еврейский университет из Иерусалим, Израиль, и разрабатывается по коммерческой лицензии компанией BriefCam, Ltd.[5]BriefCam получила лицензию на использование технологии от Yissum который является владельцем патентов, зарегистрированных на технологию. В мае 2018 года BriefCam была приобретена японским гигантом цифровой обработки изображений, Canon Inc. примерно на 90 миллионов долларов.[6] Инвесторами компании являются Motorola Solutions Venture Capital, Aviv Venture Capital и OurCrowd.[7]

Сводка видео до + после (по горизонтали) .jpg

Последние достижения

Последние достижения в области синопсиса видео привели к появлению методов, которые фокусируются на сборе ключевых точек (или кадров) из длинного неразрезанного видео и представлении их в виде цепочки ключевых событий, которые резюмируют видео. Как упоминалось в,[8] это только один из многих методов, используемых в современной литературе для решения этой задачи. В последнее время эти методы, управляемые событиями, были сосредоточены на сопоставлении объектов в кадрах, но более семантически связанным способом, который был назван методом резюмирования видео на основе сюжета. Эти методы показали свою эффективность для эгоцентричный[9]настройки, в которых видео в основном представляет собой точку зрения одного человека или группы людей.

Смотрите также

Рекомендации

  1. ^ Ю. Прич, С. Ратович, А. Хендель, С. Пелег, Кластерный обзор видеонаблюдения, 6-е IEEE Int. Конф. по расширенному видеонаблюдению и видеонаблюдению (AVSS'09), Генуя, Италия, 2–4 сентября 2009 г.
  2. ^ Ю. Прич, А. Рав-Ача, А. Гутман, С. Пелег, Синопсис веб-камеры: Заглядывать по всему миру, ICCV'07, октябрь 2007 г. 8 стр.
  3. ^ Ю. Прич, А. Рав-Ача, С. Пелег, Нехронологический синопсис и индексирование видео, IEEE Trans. ПАМИ, Том 30, № 11, ноябрь 2008 г., стр. 1971–1984.
  4. ^ А. Рав-Ача, Ю. Прич, С. Пелег, Создание длинного короткого видео: краткий обзор динамического видео, CVPR'06, июнь 2006 г., стр. 435-441.
  5. ^ С. Пелег, Ю. Каспи, Белая книга BriefCam
  6. ^ Яблонько, Ясмин (9 мая 2018 г.). «Canon покупает израильские видеорешения совместно с BriefCam за 90 млн долларов». Глобусы (на иврите). Получено 2018-12-05.
  7. ^ CB Insights. "BriefCam Funding & Investors - CB Insights". www.cbinsights.com. Получено 2018-12-05.
  8. ^ Мухаммад Аджмал, Мухаммад Хуснаин Ашраф, Мухаммад Шакир, Ясир Аббас, Фаиз Али Шах, Обобщение видео: методы и классификация [1]
  9. ^ Чжэн Лу, Кристен Грауман [2] Сюжетное резюме для эгоцентрического видео. В материалах конференции IEEE по компьютерному зрению и распознаванию образов - 2013.

Патенты

внешняя ссылка