Часы и календари - бич современного ИИ

Согласно исследованию шотландцев из Эдинбурга, у Искусственного Интеллекта проблемы с распознанием чисел на часах и календарях. Они просто не могут их правильно интерпретировать.

(С чем редактор не согласен, основная проблема ИИ - это невозможность заменить строчки в песнях, без изменения самой песни - прим. редактора)

Причём для нейросетей нет такой проблемы, как написание эссе и целых произведений искусства (с большими огрехами и если не приглядываться).

В отличие от простого распознавания форм, понимание аналоговых часов и календарей требует сочетания пространственного восприятия, контекста и базовой математики - что остается сложной задачей для ИИ.

Группа учёных проверила, смогут ли системы ИИ, обрабатывающие текст и изображения, известные как многомодальные большие языковые модели (MLLM, Multimodal Large Language Models), отвечать на вопросы, связанные со временем, глядя на фотографию часов или календаря.

Протестировали также и различные конструкции часов, в том числе с римскими цифрами, с секундной стрелкой и без нее, а также с циферблатами разных цветов.

Процент правильного определения времени был отвратительным - меньше 25% верных случаев. При уникальном стиле стрелок или при использовании римских цифр, кол-во ошибок только увеличивалось. И даже без секундной стрелки, ИИ не стал лучше понимать концепт времени.

С календарями всё чуть-чуть получше вышло, там уже ошибки в рассчётах были около 20%, а не 75%, как с часами. В апреле этого, 2025го года, будет проведён семинар, где учёные представлят статью с полными результатами исследования.

Источник: vk.com

Комментарии: