В основе обновления лежит мультимодальная архитектура. Инженеры компании сначала обучили масштабную модель, на базе которой создали ряд компактных решений для разных этапов обработки данных. Наиболее ресурсоемкие вычисления система выполняет заранее, поэтому скорость формирования результатов поиска осталась прежней.
Яндекс объединил анализ изображений и текста в поиске
Поисковый алгоритм Яндекса научился сопоставлять визуальный контент с описанием на странице в режиме реального времени. Ранее система обрабатывала эти данные раздельно, что приводило к ошибкам, если подпись к фотографии не соответствовала действительности или была избыточной. Теперь нейросети анализируют оба источника информации одновременно, повышая точность выдачи.
Разработчики отмечают, что совместный анализ картинки и сопровождающего текста уже позволил увеличить долю релевантных изображений в топе выдачи. Технология особенно эффективна в случаях, когда описание не дает полного представления о содержимом снимка или содержит неточности, сбивавшие прежние алгоритмы с толку.
Комментарии (0)
Пока нет комментариев. Будьте первым!