Создание экспериментального стенда для оценки методов поиска изображений по содержанию Выполнила: Теплых М. А. Научный руководитель: Васильева Н. С. Рецензент: Барашев Д. В.

2 Поиск статических изображений Поиск по аннотациям – DBIR (Description Based Image Retrieval) Поиск по аннотациям – DBIR (Description Based Image Retrieval) Поиск по содержанию – CBIR (Content Based Image Retrieval) Поиск по содержанию – CBIR (Content Based Image Retrieval) Запрос – изображение Запрос – изображение Запрос – эскиз Запрос – эскиз Запрос – текст Запрос – текст

3 Актуальность В CBIR используются алгоритмы индексации и поиска изображений В CBIR используются алгоритмы индексации и поиска изображений Активно разрабатываются новые методы поиска изображений Активно разрабатываются новые методы поиска изображений Необходимо их оценивать для выбора оптимального: Необходимо их оценивать для выбора оптимального: Автоматическая оценка без участия человека (асессора) невозможна Автоматическая оценка без участия человека (асессора) невозможна Нельзя вечно эксплуатировать асессоров Нельзя вечно эксплуатировать асессоров

4 Постановка задачи Разработать универсальный экспериментальный стенд, включающий: Разработать универсальный экспериментальный стенд, включающий: приложение для асессоров, приложение для асессоров, приложение для разработчиков методов поиска изображений по содержанию приложение для разработчиков методов поиска изображений по содержанию Экспериментально сравнить с помощью разработанного стенда два метода поиска по цветовой характеристике Экспериментально сравнить с помощью разработанного стенда два метода поиска по цветовой характеристике

5 Требования к экспериментальному стенду Простота использования для асессоров и разработчиков Простота использования для асессоров и разработчиков Возможность дальнейшего тестирования методов поиска без привлечения асессоров Возможность дальнейшего тестирования методов поиска без привлечения асессоров Наличие отчетов для распространенных оценок методов поиска: полнота, точность и т.д. Наличие отчетов для распространенных оценок методов поиска: полнота, точность и т.д.

6 Приложение для пользователей- асессоров асессор сравнивает

7 Приложение для пользователей- разработчиков

8 Взаимодействие с библиотекой разработчика запрос данных ответ … библиотека разработчика уточнённый запрос уточнённый ответ анализ запрос данных эксперименталь- ный стенд

9 Методы, участвовавшие в эксперименте Методы поиска на основе цветовой характеристики: Методы поиска на основе цветовой характеристики: гистограммный метод, гистограммный метод, статистический метод статистический метод

10 Результаты Разработан экспериментальный стенд: Разработан экспериментальный стенд: приложение для сбора оценок асессоров, приложение для сбора оценок асессоров, приложение для работы с отчетами приложение для работы с отчетами Произведена оценка двух методов поиска на основе цветовой характеристики Произведена оценка двух методов поиска на основе цветовой характеристики Полнота по пересечению Точность по пересечению Полнота по объединению Точность по объединению Гистограмм- ный метод 6,55%2,57%56,77%23,02% Статистичес- кий метод 7,99%2,92%55,98%25,06%