Бездомные животные, большинство из них бывшие домашние питомцы, многие из них потерялись. Для решения этой проблемы есть идея создать сервис поиска по фотографиям, у нас уже есть контакт с pet911.ru, нужно сделать CV модель.
На простом человеческом: "поиск животных по отличительным особенностям: размер, цвет, паттерн на шерсти, отрезанно ухо, сломан хвост, ошейник и так далее. С поправкой на погоду/освещение/состояние животного/грязь на шерсти/лишние объекты на фотке."
С технической точки зрения, так как это поиск то возможно подойдёт word2vec подход (или точнее img2vec). То есть, например, строим базу векторов доступных животных в БД (id животного -> вектор из последнего слоя модели + доп фичи) и для каждого нового животного генерируем тот же самый вектор от той же модели и ищем по базе.
Ложно отрицательные результаты критичны. Плохо если из выборки пропадает целевое животное. С другой стороны если мы выдаём больше ложно положительных то человек может сам доискать животное (в разумных количествах и отсотрированных по уменьшению схожести).
На первых этапах важнее сфокусироваться на собаках - их намного сложнее пристраивать, лечить, передерживать и так далее.
Что хотелось бы увидеть на выходе
1 этап - понять какая моедль будет лучше работать и какая разметка нужна для обучения
2 этап - разметка или поиск данных для обучения (тут я помогу)
3 этап - прототип рабочей модели с исходным кодом которая за разумное время может генерировать вектор
4 этап - модель обученная на всём доступном датасете (тут так же могу помочь, в том числе с инвестициями в сервера для обучения)
Данные
Размеченные датасеты что я нашёл в открытом доступе:
