В Ultima Яндекс Маркете появился поиск товаров по фотографии на базе нейросети. Новая функция позволяет загрузить изображение понравившейся вещи и найти аналоги или оригинальные позиции в каталоге маркетплейса. Это поможет покупателям быстрее находить нужные товары, особенно когда сложно подобрать точные слова для запроса.
Поиск по фото работает на основе компьютерного зрения и мультимодальной нейросетевой модели. Алгоритм анализирует загруженное изображение: определяет категорию товара, ключевые атрибуты (фасон, цвет, материал, паттерны), а затем сопоставляет их с базой товаров. Функция доступна прямо в поисковой строке приложения – для этого нужно нажать на иконку камеры и загрузить снимок.
Нейросеть умеет распознавать предметы в сложных условиях: на фотографиях с магазинных витрин, скриншотах из соцсетей и даже при частичном перекрытии объекта. Система предлагает релевантные результаты, ранжируя их по степени соответствия изображению. При необходимости пользователь может быстро уточнить запрос текстом.
Функция работает в бета-режиме и интегрирована в два ключевых раздела: в премиум-сегменте Ultima Яндекс Маркет и в основных категориях общего каталога (одежда, обувь, аксессуары, товары для дома). Поиск по фото поддерживается во всех городах присутствия маркетплейса.
Ранее Яндекс Маркет внедрил систему искусственного интеллекта для борьбы с мошенничеством в пунктах выдачи заказов (ПВЗ). Алгоритм призван остановить схему, когда дорогостоящие товары с постоплатой похищают из ПВЗ, причиняя убытки продавцам и владельцам пунктов.
Источник: пресс-релиз Яндекса