Это позволит точнее определять содержание изображений
Искусственный интеллект011:04
«Яндекс» усовершенствовал поиск по изображениям, внедрив одновременный анализ как самой картинки, так и текста, который ее сопровождает на странице.
В компании заявляют, что это позволит более точно определять содержание изображений, особенно в ситуациях, когда подпись или описание не совпадают с тем, что изображено на фотографии.
Алгоритмы поиска по картинкам «Яндекса» научились одновременно анализировать изображение и текст на странице. <…> Новая технология позволяет улучшить результаты в тех случаях, когда текст в описании картинки противоречит самому изображению.
В основе обновления лежит мультимодальная технология. Сначала специалисты обучили крупную модель, а затем на ее основе создали несколько компактных моделей для различных этапов обработки данных. Самые ресурсоемкие операции выполняются заранее, что позволяет новому алгоритму функционировать в реальном времени без увеличения времени формирования результатов поиска.
Ранее система анализировала изображение и текст по отдельности, что могло приводить к ошибкам при несоответствии визуальной информации и описания. Теперь эти данные рассматриваются вместе. По словам «Яндекса», после внедрения технологии доля релевантных изображений в верхней части поисковой выдачи значительно возросла.
JinИсточники:ТАСС«Яндекс»Искусственный интеллект011:04
Источник