5 Tools zur Automatisierung von Spieletests für eine schnellere Qualitätssicherung

Sollten Sie Tools zur Automatisierung von Spieletests verwenden oder nur manuelle Tests durchführen? Wenn Sie KI-basierte Tests und andere automatisierte Lösungen einsetzen, für welche sollten Sie sich entscheiden? Welche dieser Optionen hilft Ihnen, das Schicksal vieler Spielestudios zu vermeiden, die scheinbar alle paar Monate ganze Entwicklungsteams entlassen und schließen?

Dieser Artikel, verfasst von QA-Ingenieuren mit langjähriger Erfahrung im Bereich Spieletests, beantwortet all diese Fragen. Außerdem stellen wir eine umfassende Liste von Testtools für verschiedene Engines und Spielaspekte zur Verfügung. Darüber hinaus erklären wir Ihnen, wie Sie Ihren Workflow und Ihr Budget beim Testen der Spieleleistung optimal nutzen können.

Wenn Ihr Studio sich also einen Einbruch von 29 % wie bei CD Project Red nicht leisten kann, das eine hoffnungslos fehlerhafte Version von Cyberpunk 2077 veröffentlicht hat, lesen Sie weiter!

• Engine-Abdeckung
• Engine-Tiefe
• Black-Box-Reichweite

Unter Berücksichtigung all dieser Faktoren bieten wir eine Liste von Tools zur Automatisierung von Spieletests, die für jede Art von Spiel geeignet sind. Unsere Experten haben außerdem sichergestellt, dass diese Tools auch im Jahr 2025 relevant sind und regelmäßig aktualisiert werden.

GameDriver

Dieses für Unity und Unreal Engine entwickelte Tool zur Automatisierung von Spieletests unterstützt PC-, Konsolen- und mobile Plattformen. Seine herausragendste Funktion ist der Test Assistant. Dabei handelt es sich um ein eigenständiges Tool, mit dem Sie Tests erstellen und verwalten können, ohne auf den Quellcode oder die Spiel-Engine zugreifen zu müssen, was für die Fehlerbehebung von unschätzbarem Wert ist. Darüber hinaus ermöglicht Ihnen dieses plattformübergreifende Toolkit den direkten Zugriff auf Spielobjekte innerhalb der Engine mithilfe der HierarchyPath Query-Sprache.

AltTester Unity SDK

AltTester ist ein Open-Source-Tool zur Automatisierung von Spieletests für Unity. Es ermöglicht Ihnen die Interaktion mit verschiedenen Spielobjekten über Skripte und unterstützt viele Programmiersprachen (C#, Python, Java und Robot Framework). AltTester lässt sich auch mit Appium integrieren, einem äußerst vielseitigen Tool zur Automatisierung von Tests für mobile Spiele, das auf WebDriver-Protokollen basiert. Mit der Desktop-Version von AltTester können Sie die Objekthierarchie überprüfen und außerhalb des Unity-Editors mit dem Spiel interagieren.

sagt Maryna,

QA-Ingenieurin bei QAwerk

Airtest + Poco

Airtest und Poco bilden eine Kombination für Spieletests, wobei ersteres ein plattformübergreifendes UI-Automatisierungsframework ist und letzteres das dazugehörige Tool für die objektbasierte UI-Steuerung. Es handelt sich um eine Lösung für die bildbasierte Automatisierung, die Bildkennungstechnologie nutzt. Poco ist ein objektbasiertes Tool zur Automatisierung von Spieletests für die UI-Steuerung, mit dem Sie mit UI-Elementen interagieren können, indem Sie auf deren Attribute verweisen. Diese Lösung ist mit iOS, Android und Windows kompatibel und umfasst eine integrierte Entwicklungsumgebung zum Schreiben und Ausführen von Testskripten.

Unreal Automation Testing Framework (ATF)

ATF ist eines der besten Tools zur Automatisierung von Spieletests für Unreal Engine. Es ist umfassend und ermöglicht Ihnen das Erstellen und Ausführen von Tests innerhalb der Unreal-Umgebung. In Kombination mit dem Gauntlet-Framework können Sie ATF verwenden, um Projektsitzungen in Unreal Engine auf Desktop-, Mobil- und Konsolenplattformen auszuführen. Darüber hinaus können Sie mehrere Client-Szenarien ausführen, was bedeutet, dass Sie Multiplayer-Spiele testen können.

Eggplant Test (Keysight DAI)

Eggplant ist ein Tool zur Automatisierung von Spieletests, das auf der Digital Automation Intelligence (DAI) von Keysight basiert. Es handelt sich um eine KI-gesteuerte Lösung, die äußerst vielseitig und mit mobilen und Desktop-Plattformen kompatibel ist. Im Bereich der Qualitätssicherung bietet es Tagging und Filterung für eine effektivere Testkonfiguration. Darüber hinaus ist es auch in der Lage, UI-Tests mittels Bilderkennungstechnologie durchzuführen.

Automatisierung von Spieletests: Stärken und Schwächen

Es besteht kein Zweifel daran, dass Tools zur Automatisierung von Spieletests unerlässlich sind, um Fehler zu beseitigen und die Qualität Ihres Produkts zu verbessern. Zu den wichtigsten Vorteilen einer Investition in automatisierte QA-Lösungen gehören:

• Geschwindigkeitssteigerung: Sie können lange Testsitzungen durchführen, um den Prozess zu beschleunigen und Ihre Gesamtproduktivität zu steigern.
• Budget-Skalierbarkeit: Viele der Tools zur Automatisierung von Spieletests bieten abonnementbasierte Preismodelle, sodass Sie Ihre Ressourcen bei Bedarf problemlos aufstocken und bei Bedarf reduzieren können, um Geld zu sparen.
• Beobachtbarkeit: Tools auf Engine-Ebene, wie UE ATF oder AltTester, bieten eine hohe Stabilität und ermöglichen den Zugriff auf Objekte und Eigenschaften, wodurch unnötige Schritte beim Testen entfallen.
• CI/CD-Integration: Sie können diese QA-Tools effektiv integrieren, um den Testprozess zu optimieren.
• Skalierbarkeit: Durch die Implementierung spezifischer Automatisierungstools für Spieletests können Sie schnell Multi-Client-Szenarien und breite Plattformmatrizen erstellen.
• Wiederverwendbarkeit: Sie können Testskripte wiederholt auf mehreren Plattformen verwenden, um sowohl den Prozess zu beschleunigen als auch die Kosteneffizienz zu verbessern.
• Konsistenz: Automatisierungstools für Spieletests reduzieren menschliche Fehler und können zuverlässigere Ergebnisse liefern, insbesondere bei Großprojekten.

Sie sollten jedoch nicht vergessen, dass jedes Instrument auch Schwächen hat. Berücksichtigen Sie daher bei der Planung Ihrer Teststrategie unbedingt die Einschränkungen automatisierter Qualitätssicherungsplattformen.

• Keine kreative Bewertung: Ein automatisiertes Spieletest-Tool kann technische Details des Spiels bewerten, jedoch nicht seine kreativen oder künstlerischen Komponenten. Es kann nicht beurteilen, ob das Spiel ausgewogen ist oder ob es reibungslos „fließt” und sich „richtig anfühlt”.
• Visuelle Volatilität: Bei der Verwendung von automatisierten Spieletest-Tools, die die Benutzeroberfläche bewerten, können aufgrund von Kameraverschiebungen, Shadern und anderen visuellen Veränderungen falsche Ergebnisse erzielt werden. Diese beeinträchtigen den bildbasierten Ablauf.
• Vorabkosten: Viele der führenden QA-Lösungen für Spieletests sind teuer. Diese Tools erfordern außerdem spezifische Fähigkeiten des Testers, eine Harness-Einrichtung und eine spezifische Umgebungsorchestrierung.
• Blinde Flecken: Automatisierte Tools können keine Funktionen bewerten, die ein differenziertes Verständnis erfordern, wie z. B. Exploits, soziale Dynamiken oder Barrierefreiheit. Sie können auch einige neu auftretende Gameplay-Funktionen und innovative Ansätze nicht verarbeiten.
• Wartung: Sie müssen regelmäßig Updates für Testskripte bereitstellen, die an alle Änderungen im Spiel angepasst sind, einschließlich derjenigen, die auf Testergebnissen basieren.

Was ist die effizienteste Strategie für das Testen von Spielen?

Die Gaming-Branche ist heute äußerst wettbewerbsintensiv und aufgrund zahlreicher Entlassungen und Studioschließungen von Spannungen geprägt. Jede Veröffentlichung ist ein Glücksspiel, und Sie können es sich wirklich nicht leisten, ein Produkt mit Fehlern auf den Markt zu bringen, die Ihre Erfolgschancen verringern würden. Angesichts der hohen Anforderungen des Publikums ist es entscheidend, eine umfassende Strategie für das Testen von Spielen zu implementieren, die alle Bereiche abdeckt. Allerdings müssen Sie bei Ihrer Planung auch pragmatisch vorgehen, um eine möglichst effiziente Nutzung der Ressourcen sicherzustellen.

Bei der Suche nach diesem Gleichgewicht hat uns unsere Erfahrung bei QAwerk eine klare Perspektive verschafft. Eine „effiziente” Strategie muss maßgeschneidert sein, da die größten Risiken von Projekt zu Projekt unterschiedlich sind.

Als wir beispielsweise mit dem Indie-Studio hinter Couple Up! zusammenarbeiteten, war das Hauptziel die Vorbereitung auf eine groß angelegte Markteinführung. Unsere Lasttests mit JMeter deckten eine kritische Schwachstelle auf: Der Server konnte zwar einen allmählichen Anstieg der Nutzerzahlen bewältigen, hatte jedoch Probleme mit einem starken Zustrom innerhalb kurzer Zeit. Dank dieser Erkenntnis konnten sie genau die Systemungleichgewichte und Serverfehler verhindern, die neue Markteinführungen oft beeinträchtigen.

In einem anderen Projekt halfen wir Deck 13 bei Highrise City, das Spiel nach der Markteinführung zu stabilisieren. Spieler hatten Abstürze und Einfrieren gemeldet, daher überprüften wir alles sorgfältig. Wir stellten fest, dass das Spiel auf leistungsschwächeren Computern unabhängig von den Grafikeinstellungen häufig ruckelte, und wir fanden auch einige Clipping-Probleme. Um sicherzugehen, haben wir die Hardware mit AIDA64 einem Stresstest unterzogen und festgestellt, dass die PCs in Ordnung waren. Damit war klar, dass das Problem in der Software lag, sodass sich die Entwickler auf die Behebung der richtigen Dinge konzentrieren konnten.

Hier sind einige Expertentipps aus unserer Erfahrung, die Ihnen helfen können:

• Führen Sie bei Bedarf automatisierte Funktionstests durch. Durch Automatisierung sparen Sie Geld, beschleunigen den Prozess und können viele technische Probleme erkennen, wodurch Sie das Spiel schnell optimieren können.
• Ergänzen Sie die Strategie durch Spieletestdienste, die von menschlichen Experten durchgeführt werden. So decken Sie alle Bereiche ab und stellen sicher, dass Ihr Spiel sowohl aus technischer als auch aus künstlerischer Sicht auf höchstem Niveau ist. Manuelle Sitzungen können sich auf qualitative UX, Erkundung, Entdeckung und Feinabstimmung konzentrieren.
• Verwenden Sie Tools zur Automatisierung von Spieltests auf Engine-Ebene, um Kernprobleme zu identifizieren und Abläufe und Varianten (Menüs, Inventar, Speichern/Laden und Wirtschaft) zu untersuchen. So können Sie sicherstellen, dass Sie das Maximum aus der Engine herausholen.
• Kombinieren Sie visuelle und Black-Box-Tools, um die Abdeckung zu verbessern und alle Elemente mit höchster Effizienz zu analysieren.

Fazit: So wählen Sie ein Tool zur Automatisierung von Spieletests

Bei der Auswahl einer Lösung zur Automatisierung von Spieletests sollten Sie folgende Faktoren berücksichtigen:

• Engine
• Funktionen
• Budget
• Fristen
• Integrationen
• Skalierbarkeit
• Support

Beachten Sie jedoch, dass Sie für eine umfassende Qualitätssicherung auf jeden Fall mehr als ein Tool benötigen. Wenn Sie nicht sicher sind, wo Sie anfangen sollen, ist die obige Liste von Tools eine große Hilfe. Wenn Sie sich dann der Veröffentlichung nähern und sicherstellen möchten, dass Ihr Spiel absolut stabil, zuverlässig, fehlerfrei und ansprechend ist, kontaktieren Sie uns. Wir helfen Ihnen mit einem maßgeschneiderten Testansatz, damit Sie für jeden investierten Cent den maximalen Nutzen erzielen.

Sehen Sie, wie wir Highrise City dabei geholfen haben, die Ursache für Einfrieren zu identifizieren und die Leistung vor der Veröffentlichung zu optimieren

Bitte geben Sie Ihre Geschäfts-E-Mail ein ist keine Geschäfts-E-Mail

Fallstudie herunterladen