Мультимедийный поиск - Multimedia search

Мультимедийный поиск дает информацию поиск использование запросов в нескольких типах данных, включая текст и другие мультимедиа форматы. Мультимедийный поиск может быть реализован через мультимодальный поиск интерфейсы, то есть интерфейсы, которые позволяют отправлять поисковые запросы не только в виде текстовых запросов, но и через другие средства массовой информации. В мультимедийном поиске можно выделить две методологии:

  • Поиск метаданных: поиск производится по слоям метаданные.
  • Запрос на примере: Взаимодействие заключается в отправке части информации (например, видео, изображения или аудио) с целью поиска похожих мультимедийных элементов.

Поиск метаданных

Поиск осуществляется с использованием слоев в метаданных, содержащих информацию о содержании мультимедийного файла. Поиск по метаданным стал проще, быстрее и эффективнее, потому что вместо работы со сложным материалом, таким как аудио, видео или изображение, поиск выполняется с использованием текста.

В этом методе необходимо выполнить три процесса:

Запрос на примере

В запрос по примеру, для поиска используется элемент мультимедиа контент (изображение, аудио, видео). Другими словами, запрос - это медиа. Часто это используется аудиовизуальное индексирование. Необходимо будет выбрать критерии, которые мы будем использовать для создания метаданных. Процесс поиска можно разделить на три части:

  • Сгенерируйте дескрипторы для медиа, которые мы собираемся использовать в качестве запроса, и дескрипторы для медиа в нашем база данных.
  • Сравните дескрипторы запроса и носители нашей базы данных.
  • Перечислите медиа, отсортированные по максимальному совпадению.

Мультимедийная поисковая система

В зависимости от содержания есть два больших семейства поиска:

Система визуального поиска

Внутри этого семейства можно выделить две темы: поиск изображений и поиск видео

  • Поиск изображений: Хотя обычно используется простой поиск по метаданным, все чаще используются методы индексации для повышения точности результатов запросов пользователей с помощью запрос по примеру. Например, QR коды.
  • Поиск видео: Видео можно искать по простым метаданным или по сложным метаданным, созданным путем индексации. Аудио, содержащееся в видео, обычно сканируется поисковыми системами аудио.

Поисковая система аудио

Существуют разные методы поиск аудио:

  • Голосовой поиск engine: позволяет пользователю выполнять поиск, используя речь вместо текста. Он использует алгоритмы распознавание речи. Примером этой технологии является Google Voice Search.
  • Система поиска музыки: хотя большинство приложений, которые ищут музыку, работают с простыми метаданными (исполнитель, название трека, альбом…). Есть несколько программ распознавание музыки, Например Shazam или SoundHound.

Смотрите также

внешняя ссылка