UX Measurement: Warum Bauchgefühl kein Maßstab ist

UX Measurement bedeutet, die wahrgenommene Qualität eines Produkts mit validierten Fragebögen wie dem UEQ, UEQ+ oder SUS systematisch zu erfassen – statt sich auf Meinungen und Bauchgefühl zu verlassen. Das Ergebnis sind vergleichbare Kennzahlen, die zeigen, wo ein Produkt stark ist, wo es hakt, und wie sich Verbesserungen auf Business-KPIs auswirken.

„Die Nutzer finden das schon gut.", „Das sieht doch modern aus.", „Mein Chef findet den Button zu klein."

Wenn du in UX-Projekten arbeitest, kennst du solche Sätze. Sie klingen harmlos, aber sie sind gefährlich. Denn hinter jedem dieser Sätze steckt eine Entscheidung, die auf einer Meinung basiert, nicht auf Daten. Und Meinungen haben ein Problem: Sie lassen sich nicht vergleichen, nicht reproduzieren und schon gar nicht gegenüber Stakeholdern belastbar vertreten.

Das Problem: Meinungen statt Messungen

In vielen Unternehmen werden UX-Entscheidungen immer noch nach Bauchgefühl getroffen. Der Designer findet die Navigation intuitiv, die Produktmanagerin sieht das anders, und am Ende entscheidet die Person mit dem höchsten Titel. Das Ergebnis: Endlose Diskussionsschleifen ohne klare Grundlage.

Das eigentliche Problem dabei ist nicht, dass die Meinungen falsch wären. Manchmal liegen sie sogar richtig. Aber sie sind nicht nachvollziehbar, nicht wiederholbar und nicht vergleichbar. Du kannst mit einer Meinung kein Vorher-Nachher zeigen. Du kannst damit keinen Trend ablesen. Und du kannst damit erst recht keinen Business Case für UX aufbauen.

Was systematische Messung verändert

Sobald du User Experience systematisch misst, ändern sich drei Dinge grundlegend:

Vergleichbarkeit. Du kannst dein Produkt gegen einen Benchmark einordnen. Ist die wahrgenommene Effizienz deiner App überdurchschnittlich oder unterdurchschnittlich? Wie stehst du im Vergleich zu 500 anderen Produkten, die mit dem gleichen Instrument gemessen wurden? Diese Einordnung ist Gold wert, vor allem in Gesprächen mit dem Management.

Nachvollziehbarkeit. Wenn du heute misst und in sechs Monaten erneut, siehst du schwarz auf weiß, ob deine UX-Maßnahmen gewirkt haben. Du kannst zeigen: „Die Durchschaubarkeit lag bei 1,2, nach dem Redesign liegt sie bei 1,8." Das ist kein Bauchgefühl, das ist ein Fakt.

Handlungsfähigkeit. Gute UX-Messinstrumente liefern dir nicht nur eine Gesamtnote, sondern differenzierte Ergebnisse pro Qualitätsfaktor. Du siehst konkret, wo du stark bist und wo es hakt. Statt „Macht die UX besser" heißt es dann: „Wir müssen an der Steuerbarkeit arbeiten, alle anderen Faktoren sind im grünen Bereich."

Die Instrumente: UEQ, UEQ+ und SUS

Nicht jeder Fragebogen ist gleich gut. Im Bereich der UX-Messung haben sich drei Instrumente besonders etabliert, jedes mit einem klaren Profil.

	UEQ	UEQ+	SUS
Misst	6 UX-Faktoren	20 wählbare Faktoren	Usability (1 Score)
Items	26	variabel	10
Benchmark	Ja (21.000+ Datensätze)	Ja	Ja
Sprachen	30+	27	20+
Ideal für	Web-Apps, Apps	IoT, VR, Chatbots, Sprachassistenten	Schnelle Usability-Checks
Grenze	Feste 6 Dimensionen	Höherer Aufwand bei Faktorwahl	Keine UX-Differenzierung

UEQ, Der Klassiker

Der User Experience Questionnaire (UEQ) misst sechs UX-Faktoren: Attraktivität, Durchschaubarkeit, Effizienz, Steuerbarkeit, Stimulation und Originalität. Er ist in über 30 Sprachen verfügbar und hat einen umfangreichen Benchmark aus tausenden Produktevaluationen.

Die Stärke des UEQ liegt in seiner Kompaktheit, 26 Items, die in wenigen Minuten beantwortet sind, und in der Benchmark-Datenbank mit über 21.000 Datensätzen aus mehr als 500 Produktevaluationen (Schrepp, 2023), die eine sofortige Einordnung der Ergebnisse ermöglicht. Die interne Konsistenz ist mit Cronbach's Alpha zwischen 0,73 und 0,89 pro Skala gut bis sehr gut (Laugwitz, Held & Schrepp, 2008). Sein Fokus auf das semantische Differenzial macht ihn besonders robust gegen Antworttendenzen.

Die Grenze: Die sechs Faktoren decken klassische interaktive Produkte sehr gut ab, aber nicht jedes Produkt braucht genau diese sechs Dimensionen. Für Sprachassistenten fehlt dir hier zum Beispiel ein Faktor wie „Antwortverhalten" oder „Akustik".

UEQ+, Der Modulare

Genau hier setzt der UEQ+ an. Er bietet einen Pool von 20 UX-Faktoren, aus denen du die für dein Produkt relevanten auswählst. Brauchst du „Vertrauen"? „Ästhetik"? „Haptik"? „Klarheit"? Du stellst dir deinen Fragebogen modular zusammen, und bekommst trotzdem die volle statistische Validierung und einen Benchmark.

Der UEQ+ ist aktuell in 27 Sprachen verfügbar und eignet sich besonders für neuartige Produktkategorien, bei denen der klassische UEQ nicht alle relevanten Qualitätsaspekte abdeckt. Ich bin Co-Autor des UEQ+ und kenne die Konstruktion, die Validierung und die Grenzen dieses Instruments von innen, das ist ein Vorteil, den ich in Projekten und in meinem Mastering UEQ Kurs direkt weitergeben kann.

SUS, Der Schnelle

Die System Usability Scale wurde 1986 von John Brooke entwickelt und ist damit eines der am längsten etablierten Usability-Instrumente. Sie misst Usability mit nur 10 Items und wurde in über 1.300 publizierten Studien eingesetzt (Bangor, Kortum & Miller, 2008). Der Vorteil: Alle kennen sie, sie ist schnell durchzuführen, und der SUS-Score auf einer Skala von 0 bis 100 ist leicht zu kommunizieren.

Die Grenze: Der SUS misst nur Usability, nicht die gesamte User Experience. Aspekte wie Ästhetik, Stimulation oder Vertrauen werden nicht erfasst. Außerdem ist die Interpretierbarkeit des Einzelwerts begrenzt, ein Score von 68 sagt dir „knapp überdurchschnittlich", aber nicht, wo genau das Problem liegt.

Wann welches Instrument?

Die Wahl des richtigen Instruments hängt von drei Fragen ab:

Was für ein Produkt hast du? Für klassische Web-Anwendungen und Apps ist der UEQ ein sicherer Griff. Für Sprachassistenten, IoT-Produkte, Chatbots oder VR-Anwendungen brauchst du den UEQ+, weil du dort Faktoren wie Acoustics, Trust oder Response Behavior messen musst, die der UEQ nicht abdeckt.

Was willst du wissen? Wenn dich nur die grundsätzliche Gebrauchstauglichkeit interessiert, „Kommen die Nutzer klar?", reicht der SUS. Wenn du verstehen willst, warum ein Produkt als gut oder schlecht wahrgenommen wird und welche Hebel du hast, brauchst du den UEQ oder UEQ+.

Wer sind deine Stakeholder? Der SUS-Score hat den Vorteil, dass ihn jeder versteht: „Wir sind bei 78 von 100." Der UEQ-Benchmark ermöglicht Aussagen wie: „Wir liegen bei Effizienz im oberen Viertel aller gemessenen Produkte." Beides wirkt, auf unterschiedliche Zielgruppen.

Messung ist kein Selbstzweck

Zahlen allein bringen nichts. Die Messung ist erst dann wertvoll, wenn du aus den Ergebnissen konkrete Maßnahmen ableitest. Und hier wird es interessant: Ein UEQ-Ergebnis, das dir zeigt, dass die Stimulation unterdurchschnittlich ist, gibt dir eine klare Richtung. Du weißt: Die Nutzer empfinden das Produkt als langweilig und wenig motivierend. Das ist ein konkreter Briefing-Input für das Designteam.

Der UEQ+ geht noch einen Schritt weiter. Weil du die Faktoren selbst wählst, misst du nur, was für dein Produkt relevant ist. Das macht die Ergebnisse noch handlungsfähiger, kein Rauschen durch Faktoren, die für deinen Kontext keine Rolle spielen.

Von der Messung zum ROI

Hier schließt sich der Kreis: UX-Messung ist die zwingende Grundlage für jeden ROI-Nachweis von UX. Du kannst den wirtschaftlichen Wert von UX nur dann belegen, wenn du UX auch quantifizieren kannst.

Der Weg funktioniert so: Du misst die UX mit einem validierten Instrument wie dem UEQ oder UEQ+. Parallel erhebst du eine Business-KPI wie den Customer Effort Score (CES), den NPS oder die Kundenzufriedenheit (CSAT). Dann analysierst du per linearer Regression, welche UX-Faktoren welche Business-KPI am stärksten beeinflussen. Das Ergebnis ist eine statistisch belastbare Aussage wie: „Wenn wir die Attraktivität um 0,5 Punkte verbessern, steigt der NPS um etwa 0,5 Punkte."

Das ist die Sprache, die ein CFO versteht. Nicht „UX ist wichtig", sondern „Investition X in UX-Faktor Y bringt Z Euro Ertrag." Wer sich dafür interessiert, findet auf app.roi-ux.de ein Tool, das ich genau für diesen Zweck gebaut habe.

Warum ich das anders mache

Ich bin nicht nur Anwender dieser Instrumente, ich bin Co-Entwickler. Das UEQ-Ökosystem mit UEQ, UEQ+, UEQ Short, den Benchmarks und den Analyse-Tools ist ein System, das ich von der Konstruktion über die Validierung bis zum praktischen Einsatz kenne. Das bedeutet für meine Projekte: Ich weiß, welches Instrument wann passt. Ich weiß, wo die statistischen Fallstricke liegen. Und ich weiß, wie man Ergebnisse so aufbereitet, dass sie nicht in der Schublade landen, sondern Entscheidungen treiben.

Denn genau darum geht es: UX-Messung ist kein akademisches Ritual. Es ist das Werkzeug, mit dem du aus Meinungsdiskussionen herauskommst und in datenbasierte Entscheidungen hineingehst. Und damit fängt professionelles UX-Management erst an.