Der (wirklich) vollständige Leitfaden für Tests der Benutzerfreundlichkeit

Unabhängig davon, welche konkrete Rolle du im Produktteam innehast, hast du wahrscheinlich schon von Usability-Tests gehört. Dafür gibt es einen guten Grund – Usability-Tests sind wohl eine der besten, kostengünstigsten und präzisesten Möglichkeiten, Erkenntnisse über die Nutzererfahrung zu gewinnen, die letztendlich dazu führen, dass du deine Ziele und KPIs erreichst. Als Leiter der Nutzerforschung beschäftige ich mich täglich mit Usability-Tests. Egal, ob du neu auf diesem Gebiet bist oder deine Kenntnisse auffrischen möchtest – in diesem praktischen Leitfaden findest du alles, was du brauchst. 

Warum sind Usability-Tests wichtig?

Wenn dein gesamtes Team noch nicht überzeugt ist, lohnt es sich, Zeit darauf zu verwenden, andere über den Nutzen von Usability-Tests im Produktdesignprozess zu informieren und mit ihnen darüber zu kommunizieren. So erhältst du Unterstützung, wenn du auf Grundlage deiner Usability-Erkenntnisse nutzerbasierte Produktiterationen voranbringen möchtest.  Hier sind einige der wichtigsten Gründe, warum Usability-Tests ein entscheidendes Werkzeug in deinem Alltag im Produktmanagement sind.

Zeit bei internen Diskussionen sparen

Sofern deine Organisation nicht die Ausnahme von der Regel ist, hat wahrscheinlich jeder und seine Mutter eine Meinung zur Nutzererfahrung des Features oder Ablaufs, an dem du gerade arbeitest. Wahrscheinlich stimmt auch, dass die meisten Menschen bis zu einem gewissen Grad eine fundierte Meinung haben, die auf Branchenwissen, Produkterkenntnissen und Ähnlichem beruht.  

Das Problem ist, dass du endlos diskutieren, viel Zeit verschwenden und bei der Veröffentlichung eines Kompromisses letztlich trotzdem nicht auf einer Linie liegen könntest.  Mit Usability-Tests testest du dein Feature oder deinen Ablauf mit tatsächlich relevanten Nutzern, sodass du UX-Entscheidungen auf Grundlage der Realität statt auf Grundlage der Annahmen deines Teams treffen kannst.

Usability-Tests liefern Erkenntnisse – unabhängig davon, wo du dich im Produktentwicklungsprozess befindest

Wenn du dich in der Phase vor der Veröffentlichung befindest, stellen Usability-Tests in den frühen Phasen sicher, dass deine erste Veröffentlichung auf der Realität deiner Nutzerbasis beruht. 

Produktdesigner erkennen, wie wichtig es ist, dein Produkt im Rahmen des Designprozesses an echten Nutzern zu testen. Tatsächlich kann der Einsatz von Software wie Werkzeugen für die Erstellung hochpräziser Prototypen dir helfen, Lücken zu erkennen, die möglicherweise erst sichtbar werden, wenn du die Nutzererfahrung mit deiner Zielgruppe testest.

Wenn du dein Produkt bereits veröffentlicht hast und auf quantitative Leistungsdaten wartest, kann es dir helfen, währenddessen Usability-Tests durchzuführen, damit du mit Ideen für Iterationen bereit bist, um das zu verbessern, was du in deinen Kennzahlen siehst. Nach der Veröffentlichung kannst du nutzerbasierte Erkenntnisse gewinnen, die dir helfen, Prioritäten zu setzen und deine nächsten Iterationen festzulegen.

Usability-Tests liefern dir die Erkenntnisse, die du immer dann brauchst, wenn du sie brauchst. 

Usability-Tests helfen dir, Verzerrungen bei der Entscheidungsfindung zu vermeiden.

Ob jemand in deinem Team nicht widersprechen möchte, weil er Bedenken hat, der Führungsebene zu widersprechen, oder die Person, die das Feature vorantreibt, zu 100 % davon überzeugt ist, genau zu wissen, was und wie es umgesetzt werden soll – jedes Produktteam läuft Gefahr, dass interne Faktoren zu Verzerrungen bei der Entscheidungsfindung führen. 

Wenn Usability-Tests richtig durchgeführt werden, erhältst du Erkenntnisse und eine Richtung, die all diese potenziellen Verzerrungen umgehen. So basiert das, was du für die Nutzer veröffentlichst, auf ihren Bedürfnissen und ihrer Erfahrung – und auf nichts anderem. 

Wer sollte in deinem Team für Usability-Tests verantwortlich sein?

Es gibt zwar keine eindeutige Antwort darauf, wer Usability-Tests durchführen sollte, aber bei der Entscheidung über Zuständigkeit und Durchführung von Usability-Tests solltest du einige Dinge berücksichtigen:

• Wenn Sie ein UX-Forschungsteam haben, ist dies höchstwahrscheinlich der beste Ausgangspunkt. Die Forschenden in Ihrem Team kennen die bewährten Vorgehensweisen am besten und sind mit relevanten Plattformen vertraut, um die Aufgabe schnell, aber auch mit genau dem richtigen Maß an Sorgfalt zu erledigen.
• Auch die Designer in Ihrem Team verfügen möglicherweise über die richtigen Fähigkeiten. Erstaunlicherweise umfasst nicht jede Designausbildung Forschungsmethoden wie Usability-Tests – viele Designer lernen dies jedoch im Berufsalltag. Wenn Sie kein UXR-Team haben, wenden Sie sich an Ihre Designer.
• Andere Stakeholder des Produkts können es lernen. Wenn Sie diese Initiative leiten und beispielsweise als Produktmanager tätig sind – Usability-Tests erfordern zwar einige Kenntnisse, aber wenn Sie diesen Leitfaden durcharbeiten und vielleicht einen kurzen Kurs in Betracht ziehen, können Sie diese Fähigkeit sicherlich erwerben. 

Arten von Usability-Tests

Usability-Tests umfassen im Allgemeinen das Testen einer Funktion oder eines Ablaufs mit Mitgliedern Ihrer Zielgruppe und/oder Ihrer aktuellen Nutzerbasis. Es gibt jedoch mehrere verschiedene Arten von Usability-Tests, die jeweils unterschiedliche Arten von Informationen liefern. Hier ist ein kurzer Überblick über bestimmte Arten von Usability-Tests und darüber, wann sie sinnvoll sind:

Moderierte Usability-Tests

Bei moderierten Usability-Tests führen Sie oder eine andere moderierende Person den Test in Echtzeit mit Nutzern durch – entweder persönlich oder remote über einen Videoanruf. Der wesentliche Vorteil moderierter Tests besteht darin, dass Sie den Nutzern Fragen stellen und Dinge klären können, während sie den Test durchführen. Außerdem können Sie flexibel weitere Fragen im Stil eines Interviews zu den Bedürfnissen, dem Verhalten und den Beweggründen der Nutzer stellen.

Der Nachteil moderierter Usability-Tests besteht darin, dass sie ziemlich zeitaufwendig sind: Sie müssen nicht nur bei jeder Sitzung persönlich oder per Videoanruf anwesend sein, sondern auch Termine mit den Nutzern vereinbaren und den gesamten relevanten organisatorischen Aufwand bewältigen. 

Im Allgemeinen empfehle ich diese Art von persönlichem oder remote durchgeführtem Usability-Test nur dann, wenn die Funktion oder der Ablauf von großer Bedeutung ist – es sich also nicht um eine relativ kleine Weiterentwicklung handelt – und wenn Sie Dinge wie den Nutzen für den Nutzer und Ähnliches noch hinterfragen.

Unmoderierte Usability-Tests

Bei unmoderierten Usability-Tests schicken Sie geeignete Teilnehmer – in der Regel über eine Plattform wie mein persönlicher Favorit UserTesting.com – zu einem Test, den Sie im Voraus erstellt haben. Es gibt eine Vielzahl von Tools für Usability-Tests, und eine schnelle Google-Suche liefert zahlreiche gute Optionen. Dies fällt immer in die Kategorie der remote durchgeführten Usability-Tests.  Sie erhalten die aufgezeichneten Sitzungen, anstatt während der Durchführung des Tests live mit den Nutzern dabei zu sein, und können die Sitzungen dann nach Ihrem eigenen Zeitplan ansehen und analysieren.

Der wesentliche Vorteil unmoderierter Tests besteht darin, dass sie deutlich schneller sind: Sie erstellen auf der von Ihnen verwendeten Plattform den Screener zur Rekrutierung der Teilnehmer, verfassen den Test und die relevanten Fragebögen und warten darauf, dass die Aufzeichnungen eingehen.  Sie können sie nach Ihrem eigenen Zeitplan analysieren. Wenn Sie also unter Zeitdruck stehen, können Sie die Ergebnisse schnell aufbereiten und mit Ihrem Team teilen.

Der Nachteil unmoderierter Tests besteht darin, dass Sie Ihren Testpersonen während der einzelnen Sitzungen keine Fragen stellen können. Das kann einschränkend sein, insbesondere wenn sie etwas tun oder sagen, das Sie überrascht. 

Einfache Usability-Tests

Unabhängig davon, ob Sie sich für einen moderierten oder unmoderierten Testprozess entscheiden, nutzen die meisten Produktteams irgendwann die einfachste und klarste Form des Testens. Dabei erhalten die Nutzer eine Reihe von Aufgaben, die sie durch einen Ablauf oder die Nutzung einer Funktion führen.  Während die Nutzer die Aufgaben Schritt für Schritt erledigen, machen sie uns häufig auf UX- oder sogar Funktionalitätsprobleme in jeder Phase eines Ablaufs aufmerksam.

Bei dieser Art von Tests profitieren Sie davon, dass Sie Usability-Probleme durch echte Nutzer aufdecken können, während diese den Ablauf durchlaufen. 

Fünf-Sekunden-Test

Der Fünf-Sekunden-Test ist eine Methode, bei der Sie den Nutzern fünf Sekunden lang eine Landingpage oder einen Startbildschirm zeigen und sie anschließend bitten, ihre Eindrücke und das, was ihnen aufgefallen ist, mitzuteilen.  

Diese Methode eignet sich am besten, wenn Ihr Team nach ersten Eindrücken sucht, die der Erfahrung neuer Nutzer so nahe wie möglich kommen. Sie untersucht weder die Einstellung der Nutzer zur Funktionalität noch die Nutzererfahrung in Bezug auf Funktionen und Abläufe im Detail.

Wenn Ihr Team nach solchen Erkenntnissen sucht, besteht der wesentliche Vorteil darin, dass diese Art von Testsitzung schnell und remote durchgeführt werden kann.  Außerdem kann die moderierende Person in der Regel jedes Teammitglied sein, das gut zuhören kann und die Grundlagen guter Fragestellung beherrscht. 

Kartensortierung

Kartensortierung ist zwar sehr spezifisch, aber eine äußerst leistungsfähige Methode, wenn sie mit Ihren Forschungszielen übereinstimmt. Bei Kartensortierungstests erhalten Nutzer Karten mit daraufstehenden Wörtern und werden gebeten, diese zu Gruppen zusammenzufassen und/oder entsprechend dem zu ordnen, was für sie am sinnvollsten ist.  Eine praktische Anwendung dafür ist beispielsweise die Entscheidung, wie Funktionen in einer Werkzeugleiste gruppiert werden sollen.  Indem Sie Nutzern Funktionsnamen auf Karten geben und sie bitten, diese intuitiv zu gruppieren, können Sie ein Gefühl dafür bekommen, wie und warum Nutzer intuitiv erwarten würden, bestimmte Werkzeuge zu finden.

Obwohl dies in einer unmoderierten Umgebung durchgeführt werden kann, empfehle ich im Allgemeinen, diese Tests von einem Moderator durchführen zu lassen.  Der Grund dafür ist, dass wie Nutzer Ihre Karten gruppieren zwar aufschlussreich ist, die Möglichkeit, in Echtzeit so viele Fragen wie nötig dazu zu stellen, warum Nutzer bestimmte Entscheidungen zur Gruppierung oder Anordnung treffen, jedoch wesentlich umfassendere Erkenntnisse bietet. 

Kartensortierung berührt die Nutzererfahrung nicht auf direkte Weise. Stellen Sie daher sicher, dass Informationsarchitektur Ihr Ziel ist, bevor Sie sich für diese Methode entscheiden. 

Test des ersten Klicks

Der Test des ersten Klicks ist sowohl eine Technik als auch ein eigenständiger Test. Dabei weist der Moderator oder die Testanleitung einen Nutzer an, eine Aufgabe zu erledigen, und aufgezeichnet oder beobachtet wird, wo ein Nutzer zuerst klickt, um die vorgegebene Aufgabe zu erfüllen. So können Sie überprüfen, ob Ihre Nutzererfahrung für eine bestimmte Aufgabe intuitiv ist.

Oft ist der erste Klick bei jedem Usability-Test, bei dem Nutzern mehrere Aufgaben gestellt werden, eine wichtige Kennzahl. Wenn Ihre Forschungsziele über die Frage hinausgehen, wohin ein Nutzer zuerst gehen würde, um eine Aufgabe zu erledigen, ist der Test des ersten Klicks dennoch eine nützliche Methode und Kennzahl, die Sie im Auge behalten sollten, selbst wenn Sie einen umfassenderen Usability-Test durchführen.

Navigationstest

Navigationstests können ähnlich wie Tests des ersten Klicks eigenständige Tests oder Teil eines ausführlicheren Usability-Tests sein.  Nutzern wird eine Aufgabe oder ein Ziel vorgegeben, und sie werden gebeten, die Aufgabe innerhalb Ihres Produkts zu erledigen. Dabei beobachten Sie, wie Nutzer navigieren, um verschiedene Aufgaben zu erledigen, und erfahren, ob die Informationsarchitektur Ihres Produkts für Nutzer mit bestimmten Zielen oder gewünschten Ergebnissen intuitiv ist.

Wenn Sie sich ausschließlich für die Informationsarchitektur und ihre Nutzerfreundlichkeit interessieren, ist es durchaus möglich, einen Navigationstest als eigenständigen Test zu konzipieren und großen Nutzen daraus zu ziehen.

Präferenztest

Einfach ausgedrückt bietet ein Präferenztest Nutzern verschiedene Varianten derselben Sache – möglicherweise unterschiedliche Designs oder sogar Funktionen – und bittet sie, ihre Präferenzen anzugeben und zu erklären.  

Diese Art von Test kann nützlich sein, aber nicht unbedingt aus dem Grund, den Sie vermuten. Präferenzen sind häufig eine unsichere Kennzahl – ein Design oder eine Funktion kann die Menschen im Moment stärker beeindrucken, aber keiner von uns ist besonders gut darin, zukünftiges Verhalten vorherzusagen. Mit anderen Worten: Was Menschen jetzt bevorzugen, muss nicht von Dauer sein oder außerhalb einer Testsituation relevant bleiben.

Warum sollte man es also trotzdem tun? Der entscheidende Punkt beim Präferenztest ist, den Gründen hinter den Nutzerpräferenzen die größte Aufmerksamkeit zu schenken.  Bei dieser Art von Test sollten Sie sich nicht nur deshalb für eine Option entscheiden, weil die meisten von Ihnen getesteten Personen sie bevorzugt haben.  Sie möchten mehr darüber erfahren, wie Menschen ihre Bedürfnisse und Herausforderungen im Zusammenhang mit den bevorstehenden Produktaufgaben formulieren.  Anschließend können Sie diese tiefergehenden Erkenntnisse nutzen, um tatsächlich Entscheidungen über das Produkt zu treffen.

Präferenztests lassen sich problemlos sowohl persönlich als auch aus der Ferne durchführen. Die Durchführung aus der Ferne spart wahrscheinlich Zeit und Aufwand.

Baumtest

Baumtests dienen dazu, die Auffindbarkeit bestimmter Themen oder Funktionen auf Ihrer Website oder in Ihrem Produkt zu testen. Sie unterscheiden sich von Navigationstests, weil den Testteilnehmern statt einer komplexeren Aufgabe nur die Navigationselemente angezeigt werden, etwa der Kopfbereich einer Website oder eine Werkzeugleiste einer App, und sie gebeten werden, bestimmte Themen oder Kategorien zu finden.

Baumtests, die häufig als umgekehrte Kartensortierung bezeichnet werden, können aus der Ferne oder persönlich durchgeführt werden. In beiden Fällen liefern Ihre Anschlussfragen – beispielsweise warum Nutzer auf Ihrer Website nach einem bestimmten Thema unter einer bestimmten Kategorie gesucht haben – wertvolle Erkenntnisse darüber, wie Informationen organisiert sind und ob die Struktur nutzerfreundlich ist.

Was ist mit einem Usability-Labor?

Sie sollten inzwischen überzeugt sein, dass Usability-Tests nichts Besonderes erfordern. Wenn Sie jedoch das Glück haben, Zugang zu einem Usability-Labor zu haben, eröffnen sich Ihnen zahlreiche spannende Methoden – Blickverfolgung, die Nutzung physischer Produkte und vieles mehr.  

Auch wenn Sie keinen Zugang zu einem Labor haben, schauen Sie sich dies an, einfach zum Spaß.

Usability-Tests: Tipps und bewährte Vorgehensweisen

Planung und Formulierung Ihres Tests

Unabhängig davon, für welche Methode Sie sich entscheiden, hat die genaue Formulierung Ihres Tests einen großen Einfluss auf die Qualität der Erkenntnisse, die Sie durch Usability-Tests gewinnen.  Hier sind einige Dinge, die Sie beim Einstieg beachten sollten.

• Formulieren Sie Ihre Forschungsziele: Was genau möchten Sie durch Ihren Usability-Test erfahren? Wenn Sie dieses Ziel beim Schreiben Ihres Tests als Leitprinzip oben in Ihrem Dokument festhalten, stellen Sie sicher, dass Sie die richtigen Fragen stellen, die zu Ihren Zielen passen.
• Sprechen Sie so, wie Ihre Nutzer sprechen: Die meisten von uns –ich schließe mich da nicht aus!– verwenden in unserer täglichen Arbeit viele produktspezifische Begriffe. Achten Sie beim Formulieren von Anweisungen oder Aufgaben darauf, die Wörter zu verwenden, die Ihre Nutzer benutzen, damit sie genau wissen, was zu tun ist.
• Stellen Sie sicher, dass jede Usability-Aufgabe nur eine Handlung umfasst: Oft sind wir versucht, Testteilnehmer in einer Aufgabe mehrere Schritte ausführen zu lassen. Das Problem dabei ist, dass dies zu einer Informationsüberflutung führen kann und Testpersonen häufig Schritte oder Feinheiten übersehen. Letztendlich beeinträchtigt dies die Zuverlässigkeit mancher Tests und macht sie in einigen Fällen sogar unbrauchbar.
• Lassen Sie Ihren Test von einem Kollegen überprüfen, bevor Sie ihn den Nutzern vorlegen: Oft finden meine Teamkollegen in meinen Usability-Tests Dinge, die ich für verständlich hielt, die es aber leider nicht waren. Wenn jemand Ihren Test überprüft, trägt dies zu seiner Verständlichkeit bei.

Rekrutierung von Teilnehmern

Wie und wen Sie für die Teilnahme an Ihren Usability-Tests rekrutieren, ist ein entscheidender Faktor für die Zuverlässigkeit Ihrer Erkenntnisse. Denn wenn ich eine Fotobearbeitungs-App für die Generation Z entwickle – wie relevant sind dann die Usability-Probleme meiner Mutter?

Sie können den Leitfaden von Nielsen Norman verwenden, um die benötigte Teilnehmerzahl für Ihren Usability-Test festzulegen. Sobald Sie Ihre Stichprobengröße im Blick haben, können Sie sich an den folgenden Tipps orientieren:

• Auf Testplattformen lügen Nutzer manchmal, um sich zu qualifizieren – ergreifen Sie Maßnahmen, um dies zu verhindern: Leider können Sie nicht davon ausgehen, dass alle, die Ihren Auswahlfragebogen ausfüllen, ehrlich sind, wenn Geld im Spiel ist. Manche versuchen möglicherweise herauszufinden, was Sie hören möchten, und antworten entsprechend. Es gibt verschiedene Strategien, um in Auswahlumfragen Personen auszusortieren, die nicht wahrheitsgemäß antworten. Mehr dazu erfahren Sie hier. 
• Ziehen Sie mehr als eine Nutzergruppe in Betracht:  Oft werden Sie feststellen, dass verschiedene Nutzergruppen unterschiedliche Erkenntnisse liefern – und alle davon sind nützlich. Beispielsweise teste ich häufig mit Nutzern, die unsere Produkte bereits verwenden, und zusätzlich mit Nutzern, die unsere Produkte noch nie ausprobiert haben. Dadurch erhalte ich Erkenntnisse darüber, wie sowohl bestehende als auch neue Nutzer das erleben, woran wir gerade arbeiten. 
• Erinnern Sie Nutzer immer an bevorstehende Sitzungen: Wenn Sie irgendeine Art von moderiertem Usability-Test durchführen, unabhängig davon, ob persönlich oder aus der Ferne, sollten Sie die Teilnehmer an bevorstehende Sitzungen erinnern und um eine Bestätigung ihrer Teilnahme bitten. Nicht wahrgenommene Sitzungen bedeuten für Sie einen Zeitverlust.

Analyse Ihrer Testsitzungen

Es besteht das verbreitete Missverständnis, dass man sich einfach Testsitzungen ansehen oder seine Notizen aus Live-Sitzungen durchgehen und einen Eindruck von den Testergebnissen bekommen kann. Leider ist es etwas komplizierter. Sich lediglich einen Eindruck zu verschaffen, überlässt vieles Ihrer Interpretation, die von Verzerrungen in der Nutzerforschung geprägt sein kann.   

Befolgen Sie diese bewährten Vorgehensweisen, um sicherzustellen, dass Sie die Ergebnisse Ihres Usability-Tests richtig interpretieren:

• Verwenden Sie eine einfache, aber sorgfältige Analysemethode: Zum Beispiel ist die Affinitätsdiagramm-Erstellung eine einfache, aber nützliche Methode, um aus jeder Art qualitativer Daten Themen herauszuarbeiten. 
• Analysieren Sie ALLE Ihre Sitzungen: Es kann äußerst verlockend sein, einige Sitzungen zu analysieren und es dann für den Tag gut sein zu lassen, insbesondere wenn Sie ähnliche Ergebnisse sehen. Das Problem dabei ist, dass die Feinheiten in den Testsitzungen selbst bei ähnlichen Erfahrungen der Nutzer oft sehr nützliche Erkenntnisse liefern. Darüber hinaus weiß jeder, der umfangreiche Usability-Tests durchgeführt hat, dass die ersten fünf Sitzungen manchmal eine Erkenntnis liefern – und die letzten fünf etwas völlig anderes zutage fördern!

Viel Erfolg beim Testen!

Es besteht kein Zweifel daran, dass jedes Produktteam von einer Form des Usability-Tests profitieren kann, die tiefe Einblicke in das Nutzerverhalten ermöglicht und Nutzerfeedback in Echtzeit liefert. Im Bereich der Usability-Tests gibt es für jedes Ziel geeignete Forschungsmethoden, mit denen Sie Usability-Probleme identifizieren können, die Ihnen letztendlich dabei helfen, Ihre Nutzer besser zu unterstützen.

Nachdem du dich mithilfe dieses Leitfadens informiert hast, teile ihn mit deinen Teammitgliedern und motiviere sie, zum Nutzen der gesamten Organisation Usability-Tests durchzuführen! Wenn du dich immer noch überfordert fühlst, kannst du dir einige Vorlagen für Usability-Tests oder Tutorials zur weiteren Inspiration ansehen.

Wenn du außerdem Usability-Testmethoden jeglicher Art einsetzt, abonniere unbedingt den Newsletter des CPO Clubs!