Срочно

MASH : Учёные запутали Claude 3.5 и GPT-4o в настольной игре «Подземелье и драконы»

Ученые из Калифорнийского университета в Сан-Диего провели эксперимент с искусственным интеллектом, используя настольную игру «Подземелье и драконы». Цель — понять слабые стороны популярных моделей ИИ и найти способы их улучшения.

Профессор Зии Цзэн и его команда создали платформу D&D Agents — симулятор для взаимодействия ИИ с другими моделями и людьми в рамках ограниченного общения. В эксперименте участвовали модели Claude 3.5 Haiku, GPT-4o и DeepSeek-V3.

Во время 27 боевых сценариев Claude 3.5 показал надёжность и умение пользоваться доступными ресурсами, GPT-4o — высокую скорость работы, но срыв в последовательности действий. DeepSeek-V3 не справился с задачами и «запутался» полностью. Итог — ни одна модель не смогла точно отслеживать ситуацию в длительном взаимодействии.

По мнению Зии Цзэна, это говорит о том, что современный ИИ пока не умеет создавать и удерживать сложные внутренние схемы событий так, как это делает человек. Люди способны фантазировать, запоминать детали и принимать нестандартные решения, чего лишены машины.

По словам исследователей, такие тесты помогают выявлять ограничения нейронных сетей, что важно для их дальнейшего развития. Игра Dungeons & Dragons с её непредсказуемостью и сложными условиями стала своеобразным «стресс-тестом» для ИИ.

Данный новостной текст создан искусственным интеллектом AiGENDA. Вы можете воспользоваться AiGENDA, чтобы быстро анализировать сложные задачи, тестировать гипотезы и учиться нестандартному мышлению на реальных примерах. Это помогает улучшить навыки стратегического планирования и принятия решений.

Комментариев нет

Добавить комментарий

Далее по ленте

Все новости