Sitch

Einführung

Sitch ist eine KI-gestützte Dating-App, die als persönlicher digitaler Partnervermittler fungiert. Anstelle von zwanglosem Swipen werden die Nutzer durch einen KI-Chatbot, der von einem menschlichen Partnervermittler trainiert wurde, auf der Grundlage einer tieferen Kompatibilität zusammengebracht. Die App richtet sich an Menschen, die ernsthaft auf der Suche nach einem Partner sind und einen durchdachteren Prozess bevorzugen.

Die Erfahrung beginnt mit einer ausführlichen Einführungsphase, in der die KI Fragen stellt, um die Werte, Prioritäten und bisherigen Dating-Erfahrungen des Nutzers zu verstehen. Die App chattet mit Ihnen wie ein Freund, um mehr über Sie und Ihren idealen Partner zu erfahren. Anhand dieser Antworten schlägt die KI passende Partner vor. Wenn zwei Nutzer einer Vorstellung zustimmen, fügt die KI sie zu einem Gruppenchat hinzu, ähnlich wie es ein gemeinsamer Freund tun würde. Die App verwendet ein Pay-per-Setup-Modell, bei dem den Nutzern statt eines Abonnements nur erfolgreiche Vorstellungen in Rechnung gestellt werden.

Herausforderung

Fünf Monate nach dem Soft Launch gewann Sitch an Fahrt, sammelte aber auch negative Nutzerbewertungen. Als entwicklerorientiertes Team fehlte ihnen ein strukturierter Qualitätssicherungsprozess, was dazu führte, dass Fehler und Usability-Probleme in die Live-App gelangten. Sitch ging eine Partnerschaft mit QAwerk ein, um ein effektives Testprogramm von Grund auf aufzubauen, mit dem Ziel, die Benutzererfahrung zu verbessern und das Produkt zu stabilisieren.

Am Ende unserer Partnerschaft wollte Sitch mehrere wichtige Ergebnisse erzielen:

• Drastische Reduzierung negativer Rückmeldungen: Das primäre Ziel war es, die Zufriedenheit der Nutzer zu verbessern, indem die Fehler und frustrierenden Nutzerabläufe, die zu schlechten Bewertungen führten, identifiziert und beseitigt wurden.
• Einrichtung eines robusten QA-Prozesses: Implementierung eines strukturierten und effizienten Test-Workflows, der direkt in den Entwicklungszyklus integriert werden konnte, um sicherzustellen, dass keine neuen Funktionen oder Fehlerbehebungen neue Probleme verursachen würden.
• Gewährleistung einer einwandfreien Kernfunktionalität: Es sollte sichergestellt werden, dass wichtige Funktionen wie das KI-gestützte Onboarding, die Profilerstellung, der Chat und das Matching intuitiv und stabil sind und jederzeit einwandfrei funktionieren.
• Erreichen einer konsistenten geräteübergreifenden Leistung: Allen Nutzern sollte unabhängig von ihrem iPhone-Modell, ihrer iOS-Version oder ihren Netzwerkbedingungen ein nahtloses und optisch ansprechendes Erlebnis geboten werden.

Lösung

Funktionstests

Wir führten Funktionstests für alle kritischen Benutzerabläufe durch. Dazu gehörten die Validierung des gesamten Onboarding-Quiz, das Testen der Profilerstellung und -bearbeitung im Abschnitt „Was macht dich aus?“ und die Sicherstellung eines reibungslosen Ablaufs des Kontolöschungsprozesses. Außerdem testeten wir die Chat- und Zahlungsbildschirmoptionen für neue Benutzer rigoros. Unser Team triagierte Probleme proaktiv, testete kritische Bugfixes erneut und meldete neue Bugs, die wir dabei entdeckten.

Warum das wichtig ist: Bei einer App wie Sitch bestimmen die Kernfunktionen die gesamte User Journey. Wenn ein Nutzer sein Profil nicht vervollständigen, mit einem Match chatten oder die Vorschläge der KI nicht verstehen kann, ist die App gescheitert. Wir mussten sicherstellen, dass jeder Nutzerpfad logisch, intuitiv und stressfrei war.

KI-Tests

Wir haben KI-Tests für den KI-gestützten Chat und das Onboarding-Quiz durchgeführt. Unser Team hat den Tonfall und die Relevanz der Inhalte der KI überprüft und sichergestellt, dass die Antworten angemessen und hilfreich waren. Wir haben auch Tests durchgeführt, um logische Fehler wie Schleifen oder wiederholte Fragen im Quiz zu finden, um sicherzustellen, dass die Interaktion des Benutzers mit der KI immer kohärent und effektiv war.

Warum das wichtig ist: Das zentrale Wertversprechen von Sitch ist sein KI-Matchmaker. Wenn die Konversation der KI repetitiv, irrelevant oder unlogisch ist, untergräbt dies das Vertrauen der Nutzer und entwertet das gesamte Versprechen der „menschlichen Expertise”. Diese Tests waren unerlässlich, um sicherzustellen, dass die KI intelligent und personalisiert wirkt.

Regressionstests und Tests vor der Markteinführung

Vor jeder Veröffentlichung führten wir umfangreiche Regressionstests für alle Kernprozesse durch: Registrierung, Onboarding, Chat, Einrichtung und Zahlungen. Bei größeren Rollouts, wie beispielsweise der Markteinführung in Chicago, arbeiteten wir eine umfassende Checkliste ab. Dazu gehörten die Validierung marktspezifischer Texte, das Testen der Abonnementpreise für die neue Region, die Überprüfung, ob Empfehlungslinks und Analyseereignisse mit den richtigen Marktkennungen ausgelöst wurden, und die Sicherstellung, dass Deep Links aus Push-Benachrichtigungen die Nutzer zum richtigen Bildschirm weiterleiteten.

Warum das wichtig ist: Da die Entwickler von Sitch Fehler behoben und neue Funktionen hinzugefügt haben, war es entscheidend, sicherzustellen, dass diese Änderungen nicht versehentlich bestehende Funktionen beeinträchtigten. Regressionstests dienen als Sicherheitsnetz und schützen die Benutzererfahrung vor unbeabsichtigten Folgen bei jeder neuen App-Version. Dies wurde bei der Einführung in neuen Städten noch wichtiger, wo ein einziger Fehler die gesamte Marktexpansion zum Scheitern bringen könnte.

Kompatibilitäts- und Berechtigungstests

Wir führten Kompatibilitätstests unter verschiedenen Netzwerkbedingungen durch und simulierten schlechte, instabile und nicht vorhandene Internetverbindungen, um sicherzustellen, dass die App reaktionsfähig blieb und nicht abstürzte. Wir haben auch Tests auf verschiedenen Geräten durchgeführt, um sicherzustellen, dass UI-Elemente wie Abstände und Textblöcke sowohl auf großen als auch auf kleinen Bildschirmen korrekt angezeigt werden. Schließlich haben wir überprüft, ob wichtige App-Berechtigungen für die Galerie, den Standort und Benachrichtigungen wie erwartet funktionieren.

Warum das wichtig ist: Nutzer von Dating-Apps sind viel unterwegs. Sie wechseln zwischen WLAN und Mobilfunkdaten, reisen durch Gebiete mit schlechtem Empfang und verwenden eine Vielzahl von iPhone-Modellen. Die App muss diesen Veränderungen standhalten und eine stabile Erfahrung bieten, unabhängig davon, ob der Nutzer eine perfekte Verbindung oder nur einen einzigen Balken Empfang hat.

UI-Tests

Unser Team hat jeden Bildschirm sorgfältig geprüft, um eine konsistente und hochwertige Benutzererfahrung zu gewährleisten. Wir haben Probleme wie falsche Abstände auf kleineren Handys, unpassend dimensionierte Zusammenfassungsblöcke und falsch ausgerichtete Informationen auf Profilvorschau-Bildschirmen identifiziert und markiert. Diese Liebe zum Detail stellte sicher, dass die App auf jedem Gerät professionell aussah und sich auch so anfühlte.

Warum das wichtig ist: Die Welt der Dating-Apps ist sehr umkämpft, sodass visuelle Attraktivität und Benutzerfreundlichkeit unverzichtbar sind. Eine verwirrende oder umständliche Benutzeroberfläche kann dazu führen, dass ein Benutzer die App verlässt, bevor die KI überhaupt ihre Wirkung entfalten kann. Die Benutzererfahrung muss ausgefeilt, modern und intuitiv sein.

Exploratives Testen

Nach jeder Veröffentlichung und nach Abschluss der Regressionstests führte unser Team manuelle explorative Tests durch. Wir wichen bewusst von den Standard-Benutzerpfaden ab, probierten ungewöhnliche Kombinationen von Aktionen aus, testeten Randfälle von Empfehlungslinks und belasteten die App, um versteckte Fehler, Lücken in der Benutzerfreundlichkeit und potenzielle Absturzszenarien aufzudecken, die bei skriptbasierten Tests übersehen worden wären.

Warum das wichtig ist: Skriptbasierte Tests bestätigen, dass die Funktionalität wie erwartet funktioniert, aber explorative Tests decken Probleme auf, nach denen Sie nicht gesucht haben. Bei einer High-End-App sind versteckte Fehler und Frustrationen hinsichtlich der Benutzerfreundlichkeit inakzeptabel.