Умный поиск по фото: как находить товары по изображению

Поиск по фотографии выглядит как самая понятная функция на свете: сфотографировал — нашёл. На практике между снимком и товаром в корзине лежит несколько условий, и большинство магазинов не выполняют ни одного.

Разберём, что нужно технически, во что это обходится и где действительно окупается.

Сразу оговорка: сам AISSE поиском по картинке не занимается — почему, разобрано отдельно. Эта статья — про технологию как таковую, чтобы вы могли принять решение осознанно.

Как это устроено

Три шага, одинаковые у всех реализаций.

1. Снимок превращается в описание признаков. Форма, пропорции, цвет, текстура, характерные детали. Это делает обученная модель.

2. То же самое делается для каждой фотографии каталога. Один раз при загрузке и дальше при пополнении.

3. Ищется ближайшее. Из снимка покупателя достаются признаки и сопоставляются с каталогом.

Ключевое следствие: система ищет визуально похожее, а не «то же самое». Она не знает, что на фото именно ваш артикул — она знает, что он выглядит ближе всех остальных.

Что нужно от каталога

Здесь и обнаруживается основная стоимость.

Фотографии на каждой позиции. Не одна на группу, не «фото уточняйте». Без снимка позиция невидима для такого поиска в принципе.

Несколько ракурсов. Одна фотография спереди — и товар не найдётся по снимку сбоку или сверху.

Чистый фон или хотя бы предсказуемый. Снимки, где товар лежит среди других вещей, работают хуже.

Одинаковое качество. Каталог, в котором часть фото от производителя, а часть снята на телефон в подсобке, даёт разнобой в признаках.

Актуальность. Обновили упаковку — обновите фото, иначе поиск будет узнавать то, чего уже нет на складе.

Для каталога на несколько тысяч позиций приведение фотографий в порядок — это работа на месяцы, и она дороже самого подключения технологии.

Где это окупается

Работает там, где внешний вид и есть товар, а словами его описать трудно.

• Одежда и обувь. Крой, фасон, принт. Покупатель видел на улице и хочет похожее.
• Мебель и декор. Форма и стиль важнее характеристик.
• Отделка и плитка. Фактура и рисунок словами не передаются.
• Крепёж и мелкие детали. Здесь фото решает обратную задачу: показать то, название чего человек не знает.

Где не окупается

Когда товары внешне одинаковы. Две канистры масла с разным допуском выглядят идентично. Снимок не различит их никогда, а разница между ними — весь смысл выбора.

Когда важна совместимость. Фотография подшипника не скажет, к какой машине он подходит. Ответ лежит в базе применимости, а не в изображении.

Когда решает размер. Крепёж на фото без линейки — просто болт. Размер и есть запрос.

Когда покупатель фотографирует проблему, а не товар. Снимок трещины в стене, пятна на потолке, сломанной детали. Он хочет решение, а на фото — симптом.

Последний случай встречается чаще, чем ожидают: в поддержку присылают именно такие снимки.

Практический пример: два магазина

Магазин плитки. Покупатель фотографирует понравившуюся стену в кафе. Каталог — 3 000 позиций, у каждой качественное фото фактуры от производителя. Поиск по фото попадает в задачу точно: похожий рисунок и есть запрос.

Магазин автозапчастей. Покупатель фотографирует снятую деталь. Внешне таких деталей в каталоге сорок штук, они отличаются посадочным размером и применимостью. Визуально ближайшая — не та, что нужна. Здесь фото бесполезно без марки машины; вопрос «какая машина?» полезнее любого снимка. Как устроен подбор запчастей по описанию.

Что спросить у подрядчика

1. Сколько фотографий нужно на позицию и в каком качестве? Ответ определяет вашу основную трату.
2. Что происходит с позициями без фото? Обычно — выпадают из поиска молча.
3. Что система делает, когда уверенности нет? Правильный ответ — говорит об этом и предлагает описать словами.
4. Как обновляются фотографии при пополнении каталога?
5. Покажите на моём каталоге. Как и с любым поиском — только на своих данных.

Чего ждать не стоит

Точного попадания в артикул. Это поиск похожего, а не распознавание номенклатуры.

Работы без подготовки фотографий. Это не «подключили и заработало», а проект по данным.

Замены текстового подбора. Снимок отвечает на вопрос «что это», но не на «что мне подойдёт». Второе — про задачу, и его закрывает разговор. Как из текста достаётся задача.

Итог

Поиск по фото — рабочая технология с узкой областью применения. Он окупается там, где внешний вид и есть товар, и не окупается там, где решают размер, совместимость или назначение.

Основная стоимость лежит не в подключении, а в фотографиях каталога: ракурсы, качество, актуальность на каждой позиции.

И главное различение: снимок хорошо отвечает на «что это такое» и плохо — на «что мне подойдёт».

Проверить, что закрывается словами

Прежде чем вкладываться в фотосъёмку каталога, полезно понять, какая часть задач решается обычным разговором. Демо AISSE собирает каталог по адресу сайта — задайте ему те запросы, ради которых вы думали про поиск по фото.