Nudge Patterns

Evidenz-Score: So bewerten wir Verhaltenseffekte

Effekt-Score und Transfer-Score erklärt: Wie belastbar ist ein psychologischer Effekt, und wie gut lässt er sich auf Websites und Produkte übertragen?

Warum zwei Scores?

Ein Effekt kann im Labor sehr gut belegt sein und trotzdem in einem Onlineshop kaum etwas bewirken. Deshalb trennen wir zwei Fragen. Der Effekt-Score (E) beantwortet, wie gut das psychologische Phänomen selbst belegt ist. Der Transfer-Score (T) beantwortet, wie gut belegt ist, dass es in digitalen Produkten, im E-Commerce oder im B2B-Umfeld funktioniert. Beide laufen von 1 bis 5.

Effekt-Score (E)

Stufe Label Kriterium
5 Gesichert Meta-Analyse oder Multi-Lab-Replikation bestätigt den Effekt, die Richtung ist konsistent, Randbedingungen sind bekannt.
4 Belastbar Mehrere unabhängige Studien aus verschiedenen Laboren, keine nennenswerten Gegenbefunde großer Replikationsprojekte.
3 Kontextabhängig Replikationen vorhanden, aber gemischt, oder der Effekt zeigt sich nur unter engen Bedingungen oder ist klein und heterogen.
2 Schwach Replikationen überwiegend gescheitert, oder nur ein Teilaspekt des ursprünglichen Befunds hält.
1 Vorläufig Einzelstudie ohne Replikation, oder Belege stammen nur aus Populärliteratur.

Transfer-Score (T)

Stufe Label Kriterium
5 Praxisbelegt Mehrere Feld- oder A/B-Tests im digitalen oder B2B-Umfeld.
4 Feldbelegt Feldstudien in ähnlichem Kontext, Übertragung gut begründet.
3 Teilweise belegt Einzelne Feldbefunde oder Laborstudien mit realistischen Stimuli.
2 Plausibel Nur Labor- oder Szenariostudien, Übertragung begründet, aber ungetestet.
1 Hypothese Übertragung spekulativ, nur Analogieschluss.

Deckel-Regeln

  1. Ohne unabhängige Replikation: E höchstens 3.
  2. Nur eine Einzelstudie ohne jede Replikation: E höchstens 2.
  3. Gescheiterte oder deutlich schwächere Replikationen großer Projekte: E höchstens 3, bis die Lage geklärt ist.
  4. Keine Feld- oder Praxisdaten: T höchstens 2.
  5. Bücher, Blogs und Agenturstudien zählen nicht als Evidenz, sondern höchstens als Hinweis auf die Originalquelle.
  6. Bei Konflikt zwischen Quellen gilt der niedrigere Wert, bis die Redaktion den Konflikt begründet aufgelöst hat.

Wie Praxistipps gekennzeichnet sind

  • Belegt: direkt durch Feld- oder A/B-Daten gestützt.
  • Plausibel: aus Laborbefunden abgeleitet.
  • Hypothese: Analogieschluss, vor dem Einsatz als A/B-Test prüfen.

Evidenz-Level und Prüfdatum

Aus den Scores leiten wir ein Evidenz-Level ab: hoch (E mindestens 4 und T mindestens 3), moderat (E mindestens 3) und vorläufig (E höchstens 2 oder T höchstens 1). Jede Seite nennt ein Prüfdatum. Wir prüfen alle Scores mindestens alle zwölf Monate und sofort, wenn neue Meta-Analysen oder gescheiterte Replikationen erscheinen.