Яндекс обновил алгоритмы Поиска по картинкам. Новая технология анализирует изображения и сопутствующий текст на странице, что позволяет системе точнее понимать, что ищет человек, даже если в описании допущена ошибка или оно противоречит самому изображению.
Особенно полезно обновление для категорий товаров с высокой степенью визуального сходства: электроники, мебели, автомобилей и одежды. В данных категориях в описаниях часто путают похожие модели.
Ранее алгоритм обрабатывал визуальную и текстовую информацию по отдельности, что могло приводить к несоответствиям (например, когда на фото изображен смартфон одной модели, а в тексте упоминается другая). Теперь нейросети оценивают контекст комплексно, что значительно повышает долю релевантных результатов в топе выдачи.
Технической особенностью обновления стало использование мультимодальной модели, на базе которой инженеры создали несколько облегченных компактных версий для разных этапов обработки запроса. Благодаря тому, что самые сложные вычисления вынесены на предварительный этап, скорость поиска осталась прежней, а время ответа системы не увеличилось.
Напомним, ранее Яндекс представил программу 75/75/75, которая должна сделать использование искусственного интеллекта новым стандартом разработки в инженерных командах.
Источник: пресс-релиз Яндекса