Яндекс обновил поиск по картинкам: теперь нейросети анализируют изображение и текст вместе

Теперь система анализирует картинку и текстовый контекст страницы одновременно, а не раздельно, как было раньше. Об этом сообщает Trashbox.ru.

Суть технологии

Ранее алгоритм обрабатывал визуальный контент и окружающий текст независимо — из-за этого терялась связь между содержимым картинки и описанием на странице. Теперь на основе мультимодальной модели Яндекс смотрит на оба типа данных в комплексе. Разработчики сначала обучили крупную модель, затем дистиллировали её в несколько компактных — для разных этапов обработки. Тяжёлые вычисления выполняются заранее, поэтому время отклика поисковой системы не увеличилось.

Что меняется на практике

По данным Яндекса, в верхней части выдачи стало заметно больше релевантных результатов. Фактически это значит: если раньше поиск мог «не заметить» подходящую картинку из-за неудачного alt-текста на странице, теперь визуальный контент и текстовый сигнал суммируются. Для продвинутых пользователей — повод пересмотреть запросы и попробовать комбинированные формулировки: изображение плюс уточняющий текст в одном поисковом поле.

Контекст: гонка мультимодальности в Рунете

Обновление вписывается в тренд, который фиксируют поисковые метрики последние месяцы: крупные платформы наращивают мультимодальные компетенции. Параллельно, как сообщает SEOnews, VK внедряет нейропрофили пользователей на основе ИИ для персонализации контента — ещё один шаг в сторону комплексного анализа данных разной природы. Ожидаемый паттерн: всплеск интереса к теме в первые 48–72 часа, затем плавный спад к средним значениям — как это было с каждым крупным обновлением поисковых алгоритмов в последние годы.