Bugs in Merlin AI: AI Chat Assistant für Android gefunden
GenSpark ist eine bemerkenswerte KI-basierte mobile Anwendung, die als persönlicher Assistent dient und darauf ausgelegt ist, die Produktivität der Nutzer zu maximieren, indem sie KI zum Greifen nah macht.
Die App bietet eine breite Palette an Funktionen – von Terminplanung und Trainingsroutinen bis hin zu E-Mail-Verwaltung und ganzheitlicher Gesundheitsberatung – und revolutioniert damit das Aufgaben- und Zeitmanagement.
Das QAwerk-Team hat einen gründlichen Bug Crawl auf Merlin AI: AI Chat Assistant für Android durchgeführt und dabei Probleme aufgedeckt, die die Leistung und das Benutzererlebnis beeinträchtigen könnten. Nachfolgend finden Sie unsere detaillierten Ergebnisse.
Die Verwendung des archivierten GPT-3.5-Modells führt nicht zu einer Verringerung der Nutzungsanzahl
Die Strenge:
Kritisch
Voraussetzungen:
- Die App ist installiert.
- Der Benutzer ist mit dem kostenlosen Tarif angemeldet.
Wiedergabeschritte:
- Öffnen Sie die Anwendung.
- Navigieren Sie zur Kontoseite und notieren Sie sich die verbleibende Nutzungsanzahl (z. B. 82).
- Gehen Sie zum Chat-Bildschirm.
- Wählen Sie GPT-3.5 aus den archivierten Modellen aus.
- Geben Sie eine beliebige Eingabe ein und warten Sie auf eine Antwort.
- Kehren Sie zur Kontoseite zurück und überprüfen Sie die Nutzungsanzahl.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
Die Nutzungsanzahl bleibt nach der Verwendung von GPT-3.5 unverändert.
Erwartetes Ergebnis:
Die Nutzungsanzahl sollte nach jeder Eingabe um eins verringert werden.
Die App friert ein, wenn ein neues Projekt gestartet wird, ohne dass der Bild-Upload abgeschlossen werden kann
Die Strenge:
Kritisch
Voraussetzungen:
- Die App ist installiert.
- Der Benutzer ist angemeldet.
Wiedergabeschritte:
- Wischen Sie nach rechts, um das Seitenmenü zu öffnen.
- Tippen Sie auf „Merlin-Projekte“ > „Neues Projekt“.
- Geben Sie „lorem ipsum“ in die Felder „Titel“ und „Beschreibung“ ein und tippen Sie auf „OK“.
- Laden Sie zwei Bilder hoch.
- Tippen Sie sofort auf „Weiter”, bevor der Upload abgeschlossen ist.
- Geben Sie Text in „Benutzerdefinierte Anweisungen” ein und tippen Sie auf „Weiter”.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
Die App zeigt eine endlose Ladeanimation an und reagiert nicht mehr.
Erwartetes Ergebnis:
Die App sollte warten, bis der Bild-Upload abgeschlossen ist, oder den nächsten Schritt verhindern, bis der Upload abgeschlossen ist.
Anhaltende Suchanimation wird angezeigt, obwohl keine Ergebnisse im Menü-Suchfeld vorhanden sind
Die Strenge:
Schwerwiegend
Voraussetzungen:
- Die App ist installiert.
- Der Benutzer ist angemeldet.
Wiedergabeschritte:
- Wischen Sie nach rechts, um das Seitenmenü zu öffnen.
- Geben Sie „first“ in das Suchfeld ein.
- Beobachten Sie die Suchanimation.
- Schließen Sie das Seitenmenü und öffnen Sie es erneut.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
Die Suchanimation läuft unbegrenzt weiter, ohne die Rückmeldung „Keine Ergebnisse gefunden“.
Erwartetes Ergebnis:
Die App sollte die Animation stoppen und „Keine Ergebnisse gefunden” anzeigen, wenn die Suche nichts ergibt.
Die Schaltfläche „Änderungen speichern” ist nicht zugänglich, wenn großer Text in das Feld „Nachname” eingegeben wird
Die Strenge:
Schwerwiegend
Voraussetzungen:
- Die App ist installiert.
- Der Benutzer ist angemeldet.
Wiedergabeschritte:
- Starten Sie die Anwendung.
- Navigieren Sie zu Ihrem Profil und tippen Sie auf „Name bearbeiten“.
- Fügen Sie einen großen Textblock in das Feld „Nachname“ ein.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
Das Feld „Nachname“ reicht über den Bildschirm hinaus. Die Schaltfläche „Änderungen speichern“ ist nicht erreichbar und es ist kein Scrollen möglich.
Erwartetes Ergebnis:
Der Bildschirm sollte scrollen oder die Eingabelänge sollte begrenzt sein, damit „Änderungen speichern” erreichbar bleibt.
DeepSeek-Modelle werden fälschlicherweise als andere Modelle identifiziert
Die Strenge:
Schwerwiegend
Voraussetzungen:
- Die App ist installiert.
- Der Benutzer hat Zugriff auf mehrere KI-Modelle.
Wiedergabeschritte:
- Öffnen Sie die App.
- Wählen Sie Gemini 2.5 Flash; fragen Sie „Wie heißen Sie?“ – das Modell identifiziert korrekt.
- Wechseln Sie zu GPT-4o; stellen Sie dieselbe Frage – identifiziert korrekt.
- Wechseln Sie zu DeepSeek V3; stellen Sie dieselbe Frage – es wird fälschlicherweise als GPT oder Gemini identifiziert.
- Wechseln Sie zu DeepSeek R1; wiederholen Sie den Vorgang – falsche Identifizierung.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
DeepSeek-Modelle kennzeichnen sich fälschlicherweise als ChatGPT oder Gemini.
Erwartetes Ergebnis:
DeepSeek-Modelle sollten sich korrekt als DeepSeek V3 oder DeepSeek R1 identifizieren.
Die Einfügefunktion funktioniert beim Anmelden nicht im E-Mail-Eingabefeld
Die Strenge:
Schwerwiegend
Voraussetzungen:
Die App ist installiert.
Wiedergabeschritte:
- Kopieren Sie eine gültige E-Mail-Adresse in die Zwischenablage.
- Öffnen Sie die App und navigieren Sie zum Anmeldebildschirm.
- Drücken Sie lange auf das E-Mail-Eingabefeld und tippen Sie auf „Einfügen”.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
Trotz Tippen auf „Einfügen” wird kein Text eingefügt.
Erwartetes Ergebnis:
Die kopierte E-Mail-Adresse sollte beim Einfügen in das E-Mail-Feld übernommen werden.
Die Schaltfläche „Löschen“ (X) beendet den Suchmodus im Seitenmenü nicht
Die Strenge:
Geringfügig
Voraussetzungen:
- Die App ist installiert.
- Der Benutzer ist angemeldet.
Wiedergabeschritte:
- Wischen Sie nach rechts, um das Seitenmenü zu öffnen.
- Geben Sie „test“ in das Suchfeld ein und wischen Sie nach links, um das Menü zu schließen.
- Wischen Sie nach rechts, um das Menü erneut zu öffnen.
- Tippen Sie auf die Schaltfläche „Löschen“ (X) im Suchfeld.
Der Umgebung:
Poco F4; Android 13
Tatsächliche Ergebnis:
Das Suchfeld wird gelöscht, aber das Menü bleibt im Suchmodus und zeigt keine Elemente an.
Erwartetes Ergebnis:
Das Menü sollte den Suchmodus verlassen und alle Elemente anzeigen, sobald das Suchfeld gelöscht wurde.
Kritische Fehler in der Nutzungsabrechnung, im Projektablauf und in der Modellidentifizierung blockieren wesentliche Funktionen. Größere Mängel in der Benutzeroberfläche und bei der Suche stören die Kernabläufe, während kleinere Probleme bei der Eingabe und im Menü die allgemeine Benutzererfahrung beeinträchtigen. Die Behebung dieser Mängel gewährleistet zuverlässige, intuitive KI-Interaktionen.
