Beste AR/VR (2026)

1

Sima

Generalistischer AI-Agent, der natural language-Befehle innerhalb von 3D-Virtuellen Umgebungen befolgt.

4.8 (4)

· freemium

Volle Rezension

Sima (Scalable Instructable Multiworld Agent) ist ein Forschungs-AI-Agent, der darauf ausgelegt ist, in einer breiten Palette von 3D-Virtual-Environments zu operieren, einschließlich kommerzieller Videospiele und Forschungssimulatoren. Anstatt für einen einzelnen Titel trainiert zu werden, erlernt es allgemeine Fähigkeiten, die zwischen den Welten übertragbar sind, indem es natürliche Sprachbefehle auf Tastatur- und Mausaktionen abbildet, genau wie ein menschlicher Spieler. Im Rahmen von Bemühungen, leistungsfähigere, verkörperte Agenten zu entwickeln, konzentriert sich Sima auf das Befolgen von Anweisungen auf Grundlage von Umgebungsinformationen: Ein Benutzer gibt einen Befehl ein, wie z.B. 'nach links drehen', 'die Leiter erklimmen' oder 'die Ressource sammeln', und der Agent versucht, ihn nur anhand von visuellen Eingaben auf dem Bildschirm auszuführen. Dies macht ihn zu einem Testfeld für die Erforschung der Kombination von Sprache, Wahrnehmung und Aktion in komplexen, offenen 3D-Welten. Sima ist primär ein Forschungsprojekt und kein Verbraucherprodukt und ist vor allem für KI-Forscher, Spieleentwickler und Teams relevant, die verkörperte Agenten, simulationsbasiertes Training und Mensch-KI-Interaktion in interaktiven Umgebungen erforschen.

• Generalistischer Agent in verschiedenen 3D-Umgebungen
• Befolgung von natural language-Befehlen
• Visionbasierte Wahrnehmung des Spielbildschirms
• Ausgabe von Tasten- und Mausbefehlen
• Übertragung von Fähigkeiten zwischen verschiedenen Welten
• Forschungsorientierte Benchmarking über Spielzusammenhängen