Des essaims d'agents IA testés dans Minecraft et Mindustry
Y Combinator et Olam Labs ont opposé des agents GPT-6.1 Sol à des agents Claude Opus 5.5, notamment en Bed Wars et dans Mindustry.
Des chercheurs de Y Combinator et d'Olam Labs ont publié les résultats de tests menés avec des essaims d'agents IA dans plusieurs jeux vidéo, dont Minecraft et le jeu de stratégie en temps réel Mindustry, rapporte tomshardware.com. Les expériences ont mis en concurrence des agents fondés sur GPT-6.1 Sol, d'OpenAI, et sur Claude Opus 5.5, d'Anthropic.
Dans un test baptisé « Civ50 », 50 agents GPT-6.1 Sol disposaient de trois heures pour bâtir une civilisation florissante. La colonie n'a jamais prospéré : passé la première nuit, beaucoup des tâches ambitieuses du départ ont été abandonnées au profit de comportements de type bureaucratique. Quatre agents ont par exemple passé 11 minutes à désigner un unique opérateur chargé de la fertilisation pour une seule poudre d'os sur un bloc de blé.
En Bed Wars, 10 agents GPT-6.1 Sol ont affronté 10 agents Claude Opus 5.5. Les agents GPT ont adopté des stratégies plus agressives, les agents Claude une posture défensive. Lorsqu'un bug d'outil a empêché la destruction de blocs, les GPT ont diagnostiqué le problème et partagé des contournements, tandis que plusieurs agents Claude ont conclu que casser des blocs était impossible.
Dans Mindustry, les agents GPT l'ont emporté 6-1 sur l'ensemble des 7 parties. Les chercheurs concluent que les agents GPT se comportaient davantage comme une ruche, alors que les agents Claude s'organisaient autour d'un chef unique avec une prise de décision démocratique.
Code ouvert
Les essaims d'agents sont publiés en open source, afin que d'autres équipes puissent les exécuter et les tester. Les travaux s'appuient sur le dépôt Mindcraft et sur l'outil de script Mineflayer.
En bref
Quels modèles d'IA ont été testés dans Minecraft ?
Les essaims étaient fondés sur GPT-6.1 Sol d'OpenAI et Claude Opus 5.5 d'Anthropic.
Quel a été le résultat dans Mindustry ?
Les agents GPT ont gagné 6-1 contre les agents Claude sur 7 parties.
Les essaims d'agents sont-ils accessibles ?
Oui, ils sont publiés en open source pour que d'autres puissent les exécuter et les tester.