Поиск изображений. Синтез различных методов поиска при формировании результатов

Abstract

В отчете представлены результаты исследования применимости методов синтеза данных к задаче поиска изображений. При поиске изображений по содержанию распространенной практикой является независимый анализ различных низкоуровневых характеристик (цвет, текстура, форма). При таком подходе встает задача дальнейшего синтеза результатов поиска по каждой из характеристик. Авторами предлагается новая функция синтеза WTGF, которая для ряда задач выигрывает у CombMNZ. Отличительной особенностью функции WTGF является возможность учитывать разные веса для входных источников. В отчете представлены результаты экспериментов по использованию различных функций синтеза для решения задачи поиска по частично аннотированной базе изображений с текстовым запросом и классической задачи поиска изображений по содержанию. В качестве методов поиска по содержанию использованы методы поиска по цветовым и текстурным характеристикам изображений. Также в данном отчете представлен ряд методов оценки эффективности методов синтеза и поиска изображений в целом.

Fusion techniques applied to content-based image retrieval domain are discussed. Two kinds of retrieval tasks (text query search in partly annotated database and classical content-based search) are stated. A set of specific conditions (including «cone conditions») are derived from stated tasks. New fusion function WTGF based on those conditions is proposed. The main advantage of the function is that it takes into account merged lists’ weights. Experimental results for both retrieval tasks are given. Experiments show that WTGF outperforms CombMNZ for some tasks. Color- and texture-based techniques are used for the experiments. A set of techniques for fusion functions and search methods evaluation are also described. Relevance/nonrelevance overlap evaluation, mark recapture evaluation, fuzzy set evaluation are among them.