Простая задача, но серьезная проблема
Несмотря на поразительные возможности современных моделей искусственного интеллекта – от написания текстов до создания изображений и программного кода – они все еще не способны справиться с тем, что для человека считается элементарным: правильно определить время по аналоговым часам или считать дату из календаря. Об этом сообщает "Дивогляд" со ссылкой на Live Science.
Команда исследователей Эдинбургского университета протестировала несколько современных многомодальных языковых моделей (MLLM), которые могут анализировать как визуальную, так и текстовую информацию. В частности, в тесте приняли участие следующие системы: GPT-4o (OpenAI), Gemini 2.0 (Google), Claude-3.5 Sonnet (Anthropic) и LLaMA 3.2-Vision (Meta). Им была предложена серия изображений с часами и календарями.
Результаты удивили: большинство моделей не смогли корректно определить время или день недели в более чем половине случаев.
"Большинство людей учатся определять время и пользоваться календарями с раннего возраста. Наши результаты демонстрируют значительный пробел в способностях II к выполнению этих базовых навыков.
Эти ограничения следует преодолеть, если мы хотим использовать ИИ в системах, где важен точный расчет времени – например автоматизация, планирование или ассистивные технологии", – отметил автор исследования Рохит Саксена.
Работа была представлена на конференции ICLR 2025 и опубликована 18 марта на платформе arXiv как еще ожидающий рецензирования препринт.
Ранее стало известно, что Google с помощью искусственного интеллекта улучшит в Android и Chrome инструменты для слабовидящих и слуха.
Пока на нашей земле война, даже "Дивогляд" – это не о котиках и пандочках, а о победах нашего войска! Наш Telegram – Дивогляд 5.UA.
