Bugs in Hume: Your Personal AI für iOS gefunden
Hume AI ist ein innovatives Unternehmen, das sich auf die Entwicklung emotionsbewusster KI konzentriert und sich insbesondere auf sprachbasierte Interaktionen spezialisiert hat. Das Unternehmen ist bestrebt, traditionelle KI-Systeme neu zu definieren, wobei es sich nicht nur auf den Sprachkontext konzentriert, sondern auch darauf, wie dieser vermittelt wird, wobei Tonfall und emotionale Signale berücksichtigt werden.
Hume präsentiert den Nutzern EVI, eine emotional intelligente Sprach-KI mit robusten konventionellen Fähigkeiten. Diese soll eine bessere Abstimmung auf menschliche Emotionen und Reaktionen fördern und stellt eine deutliche Abkehr von traditionellen KI-Modellen dar.
Unsere QA-Ingenieure haben die App von Hume auf Fehler überprüft und Bugs identifiziert, die die Leistung und Benutzererfahrung dieser neuartigen Plattform beeinträchtigen könnten. Wir präsentieren unseren Lesern diese Ergebnisse und laden sie ein, darüber nachzudenken, wie diese Probleme gelöst werden könnten, um die Interaktion zu verbessern und einen natürlicheren KI-Konversationsfluss zu schaffen.
Fehlermeldung wird angezeigt, wenn versucht wird, sich mit der Funktion „Mit E-Mail fortfahren“ anzumelden
Die Strenge:
Kritisch
Voraussetzungen:
Die App ist installiert.
Wiedergabeschritte:
- Starten Sie die App.
- Wählen Sie die Option „Mit E-Mail fortfahren“.
- Geben Sie eine gültige E-Mail-Adresse ein.
- Geben Sie ein gültiges Passwort ein (das Passwort muss mindestens einen Großbuchstaben, einen Kleinbuchstaben, eine Zahl und ein Sonderzeichen enthalten).
- Tippen Sie auf die Schaltfläche „Weiter“.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Beim Versuch, sich mit der Funktion „Mit E-Mail fortfahren“ für die App anzumelden, wird eine Fehlermeldung angezeigt.
Erwartetes Ergebnis:
Benutzer sollten in der Lage sein, mit der Option „Mit E-Mail fortfahren“ ein Konto zu erstellen, ohne dass eine Fehlermeldung angezeigt wird.
Nach Eingabe der E-Mail-Adresse auf dem Bildschirm „Passwort vergessen“ wird die Fehlermeldung „Passwort zurücksetzen fehlgeschlagen“ angezeigt
Die Strenge:
Kritisch
Voraussetzungen:
Der Benutzer verfügt über ein bestehendes Konto.
Wiedergabeschritte:
- Starten Sie die App.
- Navigieren Sie zum Bildschirm „Anmelden“.
- Tippen Sie auf die Schaltfläche „Passwort vergessen“.
- Geben Sie die mit einem bestehenden Konto verknüpfte E-Mail-Adresse ein.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Nach Eingabe der E-Mail-Adresse auf dem Bildschirm „Passwort vergessen“ wird die Fehlermeldung „Passwort zurücksetzen fehlgeschlagen“ angezeigt.
Erwartetes Ergebnis:
Benutzer sollten ihr Passwort erfolgreich zurücksetzen können.
Fehler beim Öffnen des letzten Chats mit einem Charakter nach Antippen der Schaltfläche im Abschnitt „Zurück springen“ bei Verwendung von OS 16
Die Strenge:
Schwerwiegend
Voraussetzungen:
Der Benutzer hat mehrere aktuelle Chats mit verschiedenen Charakteren.
Wiedergabeschritte:
- Starten Sie die App.
- Tippen Sie auf eine beliebige Chat-Schaltfläche im Abschnitt „Zurück springen“.
Der Umgebung:
XS (16.3)
Tatsächliche Ergebnis:
Der letzte Chat mit einem bestimmten Charakter wird nicht geöffnet, nachdem der Benutzer unter OS 16 auf die Chat-Schaltfläche im Abschnitt „Zurück springen“ getippt hat.
Erwartetes Ergebnis:
Der Chat sollte sofort starten, nachdem der Benutzer auf die Chat-Schaltfläche im Abschnitt „Zurück springen“ getippt hat.
Die KI „Podcast Host“ wiederholt nach nicht-semantischen Antworten des Benutzers immer wieder dieselbe Aufforderung
Die Strenge:
Schwerwiegend
Wiedergabeschritte:
- Starten Sie die App.
- Starten Sie einen Chat mit dem „Podcast-Host“.
- Antworten Sie der KI mit kurzen oder nicht-semantischen Antworten.
- Beobachten Sie die Antworten der KI im Chat.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Die KI wiederholt trotz nicht-semantischer Antworten oder kurzer Bestätigungen des Benutzers ständig denselben Inhalt.
Erwartetes Ergebnis:
Die KI sollte eine der folgenden Aktionen ausführen:
- Das Gespräch auf ein neues Thema lenken.
- Eine klärende Frage stellen.
- Die Wiederholung identischer Inhalte beenden.
AI-Sprachantworten werden als Sprachmitteilungen des Benutzers im Chatverlauf gespeichert
Die Strenge:
Schwerwiegend
Wiedergabeschritte:
- Starten Sie die App.
- Starten Sie einen Chat mit dem „Outgoing Friend”.
- Führen Sie ein Gespräch, indem Sie einige Antworten geben.
- Beenden Sie die Chat-Sitzung.
- Starten Sie denselben Chat erneut.
- Geben Sie einige weitere Antworten.
- Beobachten Sie, dass die KI-Antworten als Benutzerantworten aufgezeichnet wurden.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Die Sprachmitteilungen des Benutzers enthalten KI-generierte Audiodaten anstelle der tatsächlichen Benutzereingaben.
Erwartetes Ergebnis:
Benutzermitteilungen sollten ausschließlich Audiodaten erfassen und anzeigen, die aus den Antworten des Benutzers stammen.
Der Bildschirm „Anweisungen“ wird nach dem Tippen auf die Schaltfläche „Zeigen Sie mir, wie es geht“ nicht geöffnet
Die Strenge:
Schwerwiegend
Voraussetzungen:
- Die App wird zum ersten Mal installiert.
- Der Benutzer hat keine Mikrofonisolierung eingerichtet.
Wiedergabeschritte:
- Starten Sie die App.
- Melden Sie sich bei der App an.
- Starten Sie einen Chat mit einer beliebigen Figur.
- Tippen Sie auf die Schaltfläche „Zeigen Sie mir, wie“.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Durch Tippen auf die Schaltfläche „Zeigen Sie mir, wie“ wird der Bildschirm „Anweisungen“ nicht geöffnet.
Erwartetes Ergebnis:
Der Bildschirm „Anweisungen“ sollte nach dem Tippen auf die Schaltfläche „Zeigen Sie mir, wie“ geöffnet werden.
Die Schaltfläche „Einstellungen öffnen“ öffnet nicht den Bildschirm „Mikrofoneinstellungen“
Die Strenge:
Schwerwiegend
Voraussetzungen:
Der Zugriff auf das Mikrofon wurde nicht gewährt.
Wiedergabeschritte:
- Starten Sie die App.
- Öffnen Sie einen beliebigen Chat mit KI.
- Tippen Sie auf die Schaltfläche „Einstellungen öffnen“.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Durch Tippen auf die Schaltfläche „Einstellungen öffnen“ wird der Bildschirm „Mikrofoneinstellungen“ des Systems nicht geöffnet.
Erwartetes Ergebnis:
Der Bildschirm „Mikrofoneinstellungen“ sollte nach dem Tippen auf die Schaltfläche „Einstellungen öffnen“ geöffnet werden.
Der Bildschirm „Onboarding“ kann nicht durch Wischen oder Blättern geändert werden
Die Strenge:
Geringfügig
Voraussetzungen:
Die App wird zum ersten Mal installiert.
Wiedergabeschritte:
- Starten Sie die App.
- Versuchen Sie, mit einer Wischgeste durch den Bildschirm „Onboarding“ zu navigieren.
- Versuchen Sie, durch Tippen auf die Seitensteuerung die Seiten zu wechseln.
Der Umgebung:
iPhone 16 (18.2)
iPhone 11 (26.2)
Tatsächliche Ergebnis:
Der Bildschirm kann nicht durch Wischgeste oder durch Klicken auf die Seitensteuerung auf dem Bildschirm „Onboarding“ geändert werden. Die Onboarding-Seiten können durch Tippen auf die Schaltfläche „Weiter” durchgeblättert werden.
Erwartetes Ergebnis:
Der Benutzer sollte in der Lage sein, den Bildschirm durch Wischen oder durch Klicken auf die Seitensteuerung auf dem Bildschirm „Onboarding” zu wechseln.
Insgesamt wirkt die App innovativ und ansprechend, insbesondere die sprachbasierte Interaktion und der emotionsbewusste Ansatz. Die Idee von emotional intelligenteren KI-Gesprächen ist überzeugend, und die Benutzeroberfläche wirkt zugänglich und leicht zu bedienen. Allerdings sind mir einige Fehler aufgefallen, die sich negativ auf die Benutzererfahrung und den natürlichen Ablauf der Interaktion auswirken. Diese könnten durch umfassende KI- und Funktionstests behoben werden.
