// HEISE ONLINE — INTELLIGENZA ARTIFICIALE
Claude zockt GTA 4 und andere Games: Wie sich der KI-Agent dabei anstellt
Wie schlagen sich Agenten wie Claude in einem Videospiel? Das zeigt ein Entwickler, indem er die Künstliche Intelligenz unter anderem GTA 4 spielen lässt.
Während es viele menschliche Spieler gar nicht mehr erwarten können, ihre ersten Runden in GTA 6 zu drehen, gibt es einen nichtmenschlichen Gamer, der noch seine Runden in älteren Teilen der Reihe dreht. Dabei handelt es sich um den KI-Agenten des Reddit-Users "Wonderful Ad", der Claude dazu gebracht hat, GTA 4 und viele weitere Titel zu zocken.
Um das realisieren zu können, hat sich der User Hilfe von Claude Code geholt. Zusammen mit dem Coding-Agenten hat er einen MCP-Server entwickelt, der die Verbindung zwischen Claude, dem Endgerät des Users, und damit auch dem Spiel herstellen kann. Wie er schreibt, bekommt Claude dadurch seine "eigene Tastatur, Maus, Gamepad und Bildschirmaufnahme", um Inhalte zu erkennen und zu steuern.
Games wie GTA 4 werden dabei im Hintergrund auf dem PC des Users ausgeführt. Er kann das Gerät also auch nutzen, während Claude parallel zockt. Zudem können mehrere Instanzen von Claude gleichzeitig in verschiedene Spiele geschickt werden. Den Aufwand betreibt der User, um eigens entwickelte Mods für eine Vielzahl von Spielen automatisiert testen zu lassen.
Die bloße Anbindung an die Spiele bringt Claude aber noch lange nicht dazu, plötzlich den Story-Modus von GTA 4 durchzuzocken. Stattdessen kann die KI nur einfache Befehle im Spiel ausführen. So etwa das Fahren, Fliegen oder Laufen zu gesetzten Wegpunkten auf der Karte. Um das zu ermöglichen, bekommt jedes Spiel ein eigenes Profil von Claude Code. Darin sind Informationen enthalten, wie die Minikarte aussieht, wie sich die Kamera drehen lässt und wie Wegpunkte aussehen.
Was anhand der aufgenommenen Spielszenen schnell klar wird: Ein professioneller Gamer wird Claude so schnell nicht. Gerade beim Steuern der Spielfigur zu Fuß läuft die KI immer wieder gegen Wände, Autos und Personen. Sie sucht im Grunde nur die möglichst direkte Verbindung zwischen der aktuellen Position und dem gesetzten Wegpunkt.
Neben GTA 4 hat der Entwickler Claude auch noch auf einige weitere Games losgelassen. In „Detroit: Become Human“ zockte die KI die erste Szene des Spiels, in der ein Android mit einem anderen Androiden verhandelt, der eine menschliche Geisel genommen hat. Hier musste Claude immer wieder Entscheidungen treffen, um das Schicksal aller Beteiligten zu entscheiden.
Auch hier zeigen sich aber die Limitierungen. Claude wählt lediglich offensichtliche Optionen auf dem Bildschirm aus. Zusätzliche Informationen aus der Umgebung zu erhalten, indem die Kamera gedreht wird, funktionieren bislang nicht. In „Cities: Skylines“ versuchte Claude auch noch, eine Stadt zu errichten. Die Bewohner verließen sie aber schon kurz nach dem Einzug wieder, da Anschlüsse für Trink- und Abwasser fehlten.
Wer das Projekt selbst ausprobieren möchte, kann das dank des GitHub-Projekts tun. Die Anbindung sollte allerdings laut dem Entwickler nur für Offline-Games vorgenommen werden. Die Integration könnte bei Multiplayer-Spielen zu einer dauerhaften Sperre durch die Anti-Cheat-Systeme führen.
Keine News verpassen! Jeden Morgen der frische Nachrichtenüberblick von heise online