Предложить компьютеру найти изображения по образцу — типовая задача, требующая анализа огромной базы данных. Описание словами, то есть семантическое представление информации, значительно уменьшает объемы ее исследования для выполнения задания, поэтому социальная сеть Facebook ввела поиск картинок «по смыслу» на основе нового сервиса Lumos.
Общение сопровождается многочисленными фотографиями пользователей, которые дополняют ими сообщения друзьям, оформляют информацию страниц для эффектности восприятия, выставляют фото аватарами в личных кабинетах для быстрого узнавания.
Люди, лишенные зрения полностью или частично, прекрасно владеют клавиатурой, поэтому могут описать цель поиска словами. Технология Lumos разрабатывалась как инструмент для слабовидящих, расширяющий их возможности в общении.
Словесное описание объекта — это более высокий уровень алгоритма поиска, которому предшествовали методы, характеризующие изображение по его параметрам:
- цвету;
- текстуре;
- форме.
Цветовая гамма, представленная гистограммой, — наиболее удобный способ подачи сведений в компьютер. Текстуру передают в виде уровней яркости и контрастности. Формой определяют геометрические данные объекта или его части.
Разработка поисковых возможностей по тексту запроса ведется не только для социальных сетей. Ряд отраслей, оперирующих большими массивами изображений, нуждается в такой системе. К области ее использования относятся:
- отслеживание видео в криминальном расследовании;
- построение каталогов изображений предметов искусства;
- диагностика заболеваний;
- анализ видов вооружения в военной сфере.
Словесное описание, например, портрета преступника дает возможность выбрать из данных камер видеонаблюдения похожие изображения. Исключаются фотороботы, рассылка их исполнителям для поиска, экономится время расследования.
Многомиллионная армия пользователей социальных сетей заставляет программистов искать новые пути в методах обработки информации. Найденные решения, такие как технология Lumos, с успехом применяются в других сферах деятельности.
