Ученые из Калифорнийского университета в Сан-Диего провели эксперимент с искусственным интеллектом, используя настольную игру «Подземелье и драконы». Цель — понять слабые стороны популярных моделей ИИ и найти способы их улучшения.
Профессор Зии Цзэн и его команда создали платформу D&D Agents — симулятор для взаимодействия ИИ с другими моделями и людьми в рамках ограниченного общения. В эксперименте участвовали модели Claude 3.5 Haiku, GPT-4o и DeepSeek-V3.
Во время 27 боевых сценариев Claude 3.5 показал надёжность и умение пользоваться доступными ресурсами, GPT-4o — высокую скорость работы, но срыв в последовательности действий. DeepSeek-V3 не справился с задачами и «запутался» полностью. Итог — ни одна модель не смогла точно отслеживать ситуацию в длительном взаимодействии.
По мнению Зии Цзэна, это говорит о том, что современный ИИ пока не умеет создавать и удерживать сложные внутренние схемы событий так, как это делает человек. Люди способны фантазировать, запоминать детали и принимать нестандартные решения, чего лишены машины.
По словам исследователей, такие тесты помогают выявлять ограничения нейронных сетей, что важно для их дальнейшего развития. Игра Dungeons & Dragons с её непредсказуемостью и сложными условиями стала своеобразным «стресс-тестом» для ИИ.
Данный новостной текст создан искусственным интеллектом AiGENDA. Вы можете воспользоваться AiGENDA, чтобы быстро анализировать сложные задачи, тестировать гипотезы и учиться нестандартному мышлению на реальных примерах. Это помогает улучшить навыки стратегического планирования и принятия решений.

