Kurz gefasst
- Ein Test direkt nach der Schulung misst, was in diesem Moment noch frisch im Gedächtnis ist, und genau dieses Wissen verblasst in den Monaten danach wieder. Mitarbeitende erkannten Phishing vier Monate nach einer Schulung noch nachweislich besser, nach sechs Monaten war dieser Vorsprung jedoch verschwunden. Ein hohes Ergebnis am Tag der Schulung sagt also wenig darüber aus, was Mitarbeitende ein halbes Jahr später noch wissen.
- Drei Dinge sorgen dafür, dass Wissen haften bleibt, und für alle drei ist die Beleglage stark: Lassen Sie Mitarbeitende den Stoff selbst aus dem Gedächtnis abrufen, wiederholen Sie in Abständen und stimmen Sie die Schwierigkeit auf das ab, was jemand bereits weiß. Adaptives Lernen verbindet alle drei in einem Konzept.
- Messen Sie Wochen oder Monate später noch einmal, mit Fragen desselben Niveaus, die die Mitarbeitenden noch nicht gesehen haben. Nur so weisen Sie nach, dass das Wissen tatsächlich zunimmt. Stellen Sie dieser Wissensmessung eine Kennzahl für das Verhalten zur Seite, denn wer mehr weiß, verhält sich nicht automatisch anders.
Zur Studie
- Art
- Literaturstudie auf Basis begutachteter Forschung.
- Quellen
- Fünf Metaanalysen und mehrere Übersichtsarbeiten aus der Kognitionspsychologie und der Bildungsforschung, ergänzt um experimentelle Forschung zu Gedächtnis und Lernen sowie um Feldforschung zu Phishing-Schulungen in Organisationen.
- Stand
- November 2026.
01 · BefundDer Test direkt nach der Schulung kommt zu früh
In den meisten Awareness-Programmen endet eine Schulung mit einem Test. Wer besteht, ist fertig, und die Bestehensquote geht als Beleg dafür in den Bericht ein, dass das Wissen auf dem nötigen Stand ist. Diese Argumentation hat eine Schwachstelle, nämlich den Zeitpunkt der Messung. Gelerntes verblasst schnell. Ebbinghaus beschrieb das bereits 1885, und als Forschende sein Experiment 2015 wiederholten, fanden sie dieselbe Vergessenskurve, die zunächst steil abfällt und dann allmählich abflacht (Murre und Dros, 2015).
Eine frühe Messung kann sogar in die Irre führen. Roediger und Karpicke ließen Studierende einen Text lesen. Danach las die eine Gruppe den Text noch einmal, während die andere Gruppe einen Test dazu ablegte, ohne zu erfahren, was richtig oder falsch war. Nach fünf Minuten wussten die Studierenden, die den Text erneut gelesen hatten, am meisten, nämlich 81 Prozent des Inhalts gegenüber 75 Prozent in der getesteten Gruppe. Zwei Tage später hatte sich das Bild umgekehrt (54 gegenüber 68 Prozent), und nach einer Woche war der Unterschied noch genauso groß (42 gegenüber 56 Prozent) (Roediger und Karpicke, 2006). Was direkt nach dem Lernen das höchste Ergebnis bringt, ist also nicht das, was am längsten haften bleibt. Wer nur am Tag selbst misst, läuft sogar Gefahr, den falschen Ansatz für den besten zu halten.
Wer erneut liest, weiß sofort mehr, nach einer Woche aber weniger
Anteil eines Textes, den Studierende behielten, in Prozent
Abbildung 1 Der Anteil des Textes, an den sich Studierende fünf Minuten, zwei Tage und eine Woche nach dem Lernen erinnerten. Quelle: Roediger und Karpicke (2006), Experiment 1.
Security Awareness zeigt in der Praxis dasselbe Muster. Forschende des Karlsruher Instituts für Technologie begleiteten 409 Beschäftigte einer deutschen Organisation des öffentlichen Sektors, die eine Phishing-Schulung erhalten hatten. Direkt nach der Schulung und auch vier Monate später unterschieden diese Beschäftigten Phishing-Mails und echte E-Mails nachweislich besser als zuvor. Nach sechs Monaten ließ sich dieser Unterschied nicht mehr nachweisen. Die Forschenden empfehlen deshalb, die Schulung nach einem halben Jahr aufzufrischen (Reinheimer u. a., 2020).
Der Test am Ende einer Schulung zeigt also, dass die Schulung absolviert und der Stoff in diesem Moment verstanden wurde, aber nicht, was danach davon übrig bleibt. Hinzu kommt, dass ein Test, bei dem fast alle fast alles richtig haben, keinen Raum lässt, um Unterschiede zu erkennen oder Zuwachs zu messen.
02 · BefundWissen aus dem Gedächtnis abzurufen ist selbst eine Form des Lernens
Das Experiment von Roediger und Karpicke steht nicht für sich allein. Das Phänomen ist als Testungseffekt bekannt und besagt, dass jemand, der Wissen aus dem Gedächtnis abrufen muss, es danach besser behält als jemand, der den Stoff noch einmal durchliest. In einer Metaanalyse von 61 Studien brachte das Testen gegenüber dem erneuten Lesen im Durchschnitt einen mittelgroßen Vorteil, mit einer Effektstärke von 0,50 (Rowland, 2014). Eine spätere Metaanalyse von 272 Effekten aus 118 Artikeln kam im Vergleich mit anderen Lernformen auf 0,61 (Adesope, Trevisan und Sundararajan, 2017).
Eine viel zitierte Übersichtsarbeit, die zehn Lerntechniken miteinander verglich, kommt zum selben Schluss. Nur das Selbsttesten und das verteilte Üben erhielten darin die höchste Bewertung, während erneutes Lesen und Markieren, also die am häufigsten genutzten Techniken, schlecht abschnitten (Dunlosky u. a., 2013).
Für ein Awareness-Programm bedeutet das, dass eine Frage mehr ist als ein Messinstrument. Eine Frage zu Stoff, der Wochen zurückliegt, zeigt, was haften geblieben ist, und sorgt zugleich dafür, dass dieses Wissen besser verankert wird, weil die Mitarbeitenden es erneut abrufen müssen.
03 · BefundVerteiltes Lernen wirkt besser als alles auf einmal
Die zweite gut belegte Erkenntnis lautet, dass Lernen mehr bringt, wenn es über die Zeit verteilt ist, als wenn dieselbe Lernzeit in einen einzigen Block fließt. Eine Übersicht über 317 Experimente aus 184 Artikeln bestätigte diesen Spacing-Effekt (Cepeda u. a., 2006).
Eine Folgestudie untersuchte, wie lang der Abstand idealerweise sein sollte. Mehr als 1.350 Personen lernten eine Reihe von Fakten, wiederholten sie nach einem Abstand von bis zu dreieinhalb Monaten und legten danach, bis zu ein Jahr später, einen Abschlusstest ab. Je länger das Wissen halten sollte, desto länger war auch der beste Abstand. Für einen Test nach einer Woche lag er bei 20 bis 40 Prozent dieser Woche, für einen Test nach einem Jahr bei 5 bis 10 Prozent dieses Jahres (Cepeda u. a., 2008). Soll Wissen ein Jahr lang halten, wiederholen Sie den Stoff also am besten nach etwa drei bis fünf Wochen.
Eine jährliche Schulung in einem Block bewirkt genau das Gegenteil, denn der gesamte Stoff kommt auf einmal, und danach geschieht ein Jahr lang nichts. Die Feldforschung zu Phishing-Schulungen weist in dieselbe Richtung. Eine kurze Auffrischung in Form eines Videos oder von Beispielen, durch die sich die Mitarbeitenden selbst klicken, hielt die Wirkung dort mindestens weitere sechs Monate aufrecht (Reinheimer u. a., 2020).
04 · ErklärungWarum sich die Schwierigkeit anpassen muss
Die dritte Erkenntnis betrifft die Frage, für wen der Stoff gedacht ist. Erklärungen und Hilfestellungen, die Anfängern weiterhelfen, sind für Erfahrene überflüssig und können das Lernen sogar behindern. In der Bildungsforschung heißt das expertise reversal effect (Kalyuga u. a., 2003). Ein einziges Modul für die gesamte Organisation passt deshalb zu niemandem richtig, denn die einen kommen nicht mit, während sich die anderen jedes Jahr aufs Neue durch Stoff klicken, den sie längst beherrschen.
Am schnellsten lernt man an einer Aufgabe, die weder zu leicht noch zu schwer ist. Für eine breite Gruppe von Lernmodellen wurde berechnet, dass das Optimum bei etwa 85 Prozent richtiger Antworten liegt (Wilson u. a., 2019). Dieses Ergebnis gilt für Modelle, die einfache Entscheidungen zwischen zwei Antworten lernen. Der Prozentsatz gibt deshalb eine Richtung vor, ist aber keine Norm für die Schulung von Mitarbeitenden.
Wie das in der Praxis aussieht, zeigt ein Beispiel aus den Niederlanden. Math Garden (Rekentuin), entwickelt an der Universität Amsterdam, schätzt gleichzeitig, wie gut ein Kind rechnen kann und wie schwer eine Aufgabe ist, und nutzt dafür ein Rechenverfahren aus der Schachwelt (das Elo-System). Das Programm wählt die Aufgaben so aus, dass ein Kind im Durchschnitt drei von vier richtig löst. In der Studie, die das Verfahren beschreibt, lösten 3.648 Kinder zusammen mehr als 3,5 Millionen Aufgaben (Klinkenberg, Straatemeier und van der Maas, 2011). Dasselbe Verfahren wurde danach in weiteren adaptiven Lernsystemen eingesetzt (Pelánek, 2016).
Bleibt die Frage, ob diese Anpassung auch mehr bringt. Eine Metaanalyse von fünfzig kontrollierten Evaluationen von Systemen, die den Unterricht auf die Lernenden abstimmen, fand einen medianen Effekt von 0,66 Standardabweichungen gegenüber herkömmlichem Unterricht. Durchschnittliche Lernende erreichen damit das Niveau von Lernenden, die besser abschneiden als drei Viertel der Gruppe (Kulik und Fletcher, 2016). Eine frühere Übersichtsarbeit ergab, dass Systeme, die Lernende Schritt für Schritt begleiten, fast so gut wirken wie eine menschliche Lehrkraft, mit einem Effekt von 0,76 gegenüber 0,79, jeweils im Vergleich zum Lernen ohne Begleitung (VanLehn, 2011). Eine Einschränkung gehört allerdings dazu, denn der Zugewinn war bei Tests, die zum Unterricht selbst gehörten, größer als bei allgemeinen, standardisierten Tests.
05 · AnsatzWas adaptives Lernen aus diesen Erkenntnissen macht
Adaptives Lernen führt diese drei Erkenntnisse in einem Konzept zusammen. Für ein Awareness-Programm läuft das auf fünf Entscheidungen hinaus.
- Halten Sie für das Bestehen an einem festen Maßstab fest.Ein Teil der Fragen ist für alle gleich schwer und entscheidet darüber, ob jemand besteht. So bleibt das Ergebnis fair, und die Resultate lassen sich miteinander vergleichen, auch in einem Audit.
- Stimmen Sie die übrigen Fragen auf das ab, was jemand bereits weiß.Wer die Grundlagen beherrscht, erhält schwierigere Fragen, und wer noch nicht so weit ist, erhält Fragen, die zu schaffen sind. So lernen alle auf ihrem eigenen Niveau (Kalyuga u. a., 2003; Wilson u. a., 2019).
- Kommen Sie später auf früheren Stoff zurück.Eine Frage zu einer Schulung, die Wochen oder Monate zurückliegt, zwingt die Mitarbeitenden, das Wissen in dem Moment abzurufen, in dem es zu verblassen beginnt (Roediger und Karpicke, 2006; Cepeda u. a., 2008).
- Verwenden Sie dafür eine Frage, die die Mitarbeitenden noch nicht kennen.Mit einer Frage, die jemand schon einmal gesehen hat, messen Sie, ob die Frage in Erinnerung geblieben ist, und nicht, ob der Stoff beherrscht wird.
- Leiten Sie die Schwierigkeit einer Frage aus den Antworten ab.Wer eine Frage schreibt, kann sich in ihrer Schwierigkeit täuschen. Systeme wie Math Garden leiten die Schwierigkeit deshalb fortlaufend aus den tatsächlichen Antworten ab (Klinkenberg, Straatemeier und van der Maas, 2011).
So macht es 2LRN4
In 2LRN4 umfasst jeder Test zehn Fragen. Sieben davon sind für alle gleich schwer und entscheiden darüber, ob jemand besteht, sodass der Maßstab in der gesamten Organisation derselbe bleibt. Die anderen drei richten sich nach dem Wissensstand der jeweiligen Person. Die Plattform führt diesen Wissensstand je Thema und passt ihn nach jedem Test an. Eine der drei Fragen bezieht sich auf einen Kurs, den die Person mindestens einen Monat zuvor absolviert hat, und es ist eine Frage, die sie noch nicht gesehen hat. So ruft sie früheren Stoff ab, und das Ergebnis zeigt, was haften geblieben ist. Wie schwer eine Frage ist, berechnet die Plattform aus den Antworten der Mitarbeitenden, sobald genügend Antworten vorliegen. Der Arbeitgeber bekommt den Wissensstand einzelner Mitarbeitender nicht zu sehen.
06 · AnsatzWie Sie nachweisen, dass das Wissen zunimmt
Eine steigende Linie in einem Bericht ist noch kein Beleg. Steigt ein Wert, weil Mitarbeitende mehr Tests ablegen, sagt das etwas über Aktivität aus und nichts über Wissen. Wer nachweisen will, dass das Wissen zunimmt, braucht eine Messung, die vier Bedingungen erfüllt.
- Messen Sie zu einem späteren Zeitpunkt.Tun Sie das Wochen oder Monate nach der Schulung und nicht am Tag selbst.
- Messen Sie mit Fragen desselben Niveaus.Sind die späteren Fragen genauso schwer wie die Fragen direkt nach der Schulung, können Sie beide Ergebnisse nebeneinanderlegen.
- Messen Sie mit Fragen, die die Mitarbeitenden noch nicht kennen.Nur dann sagt eine richtige Antwort etwas über den Stoff aus.
- Berichten Sie über Gruppen.Der Nachweis betrifft die Organisation und nicht eine einzelne Person. Zeigen Sie ein Ergebnis deshalb nur, wenn die Gruppe so groß ist, dass niemand darin erkennbar ist.
Zweimal messen mit Fragen desselben Niveaus
Aufbau einer Messung, die zeigt, was haften bleibt
Abbildung 2 Der Test direkt nach der Schulung zeigt, was verstanden wurde. Eine neue, gleich schwere Frage zum selben Stoff, Wochen bis Monate später, zeigt, was davon haften geblieben ist.
Dazu gehören zwei Einschränkungen. Die erste besteht darin, dass ein Wissensstand, der aus den Antworten von Kolleginnen und Kollegen abgeleitet wird, Mitarbeitende vor allem miteinander vergleicht. Werden alle gleichzeitig besser, ändert sich ein solcher Wert kaum. Der Nachweis liegt deshalb im Anteil richtiger Antworten auf Fragen eines festen Niveaus, und der Wissensstand liefert dazu allenfalls den Hintergrund.
Die zweite Einschränkung besteht darin, dass Wissen noch kein Verhalten ist. In einer Metaanalyse von 69 Studien fand die Universität Leiden einen großen Effekt von Schulungen auf Wissen und Einstellung (d = 1,02) und einen kleinen Effekt auf das Verhalten (d = 0,36) (Prümmer, van Steen und van den Berg, 2025). Eine Wissensmessung gehört deshalb neben eine Kennzahl für das Verhalten, etwa die Zahl der verdächtigen Nachrichten, die Mitarbeitende melden.
07 · FazitEntscheidend ist, was haften bleibt
Der Test am Ende einer Schulung beantwortet die Frage, ob der Stoff angekommen ist. Entscheidend ist jedoch, was Mitarbeitende in dem Moment noch wissen, in dem sie dieses Wissen brauchen, und dieser Moment liegt Wochen oder Monate später. Die Lernforschung ist hier eindeutig. Wissen verblasst, bleibt aber besser haften, wenn man das Gelernte regelmäßig aus dem Gedächtnis abrufen muss, wenn die Wiederholung über die Zeit verteilt ist und wenn der Stoff an das anknüpft, was man bereits weiß.
Adaptives Lernen macht aus diesen Erkenntnissen eine Arbeitsweise. Wer dabei auch später noch einmal misst, mit neuen Fragen desselben Niveaus, muss nicht länger annehmen, dass das Wissen zunimmt, sondern kann es zeigen.
Einschränkungen
- Dieser Bericht ist eine Literaturstudie, die vorhandene wissenschaftliche Forschung zusammenfasst, und enthält keine eigene neue Forschung.
- Die meiste Forschung zum Testen, Verteilen und Anpassen stammt aus dem Bildungsbereich, mit Schülerinnen, Schülern und Studierenden und mit Lernstoff wie Texten, Fakten und Rechenaufgaben. Es liegt nahe, dass die Ergebnisse auch für Mitarbeitende in einem Awareness-Programm gelten, direkte Forschung dazu gibt es aber noch wenig.
- Wie groß der Zugewinn durch Systeme ist, die den Unterricht auf die Lernenden abstimmen, hängt vom Test ab, mit dem gemessen wird. Bei standardisierten Tests fällt er kleiner aus.
- Das Optimum von 85 Prozent richtiger Antworten wurde für Lernmodelle und einfache Aufgaben berechnet und ist für die Schulung von Mitarbeitenden nicht untersucht.
- Mehr Wissen führt nicht von selbst zu anderem Verhalten. Dieser Bericht handelt von Wissen und trifft keine Aussage über Verhaltensänderung.
Quellen
- Adesope, O. O., Trevisan, D. A. und Sundararajan, N. (2017). Rethinking the Use of Tests: A Meta-Analysis of Practice Testing. Review of Educational Research, 87(3), 659–701. doi.org/10.3102/0034654316689306
- Cepeda, N. J., Pashler, H., Vul, E., Wixted, J. T. und Rohrer, D. (2006). Distributed practice in verbal recall tasks: A review and quantitative synthesis. Psychological Bulletin, 132(3), 354–380. doi.org/10.1037/0033-2909.132.3.354
- Cepeda, N. J., Vul, E., Rohrer, D., Wixted, J. T. und Pashler, H. (2008). Spacing Effects in Learning: A Temporal Ridgeline of Optimal Retention. Psychological Science, 19(11), 1095–1102. doi.org/10.1111/j.1467-9280.2008.02209.x
- Dunlosky, J., Rawson, K. A., Marsh, E. J., Nathan, M. J. und Willingham, D. T. (2013). Improving Students' Learning With Effective Learning Techniques: Promising Directions From Cognitive and Educational Psychology. Psychological Science in the Public Interest, 14(1), 4–58. doi.org/10.1177/1529100612453266
- Kalyuga, S., Ayres, P., Chandler, P. und Sweller, J. (2003). The Expertise Reversal Effect. Educational Psychologist, 38(1), 23–31. doi.org/10.1207/S15326985EP3801_4
- Klinkenberg, S., Straatemeier, M. und van der Maas, H. L. J. (2011). Computer adaptive practice of Maths ability using a new item response model for on the fly ability and difficulty estimation. Computers & Education, 57(2), 1813–1824. doi.org/10.1016/j.compedu.2011.02.003
- Kulik, J. A. und Fletcher, J. D. (2016). Effectiveness of Intelligent Tutoring Systems: A Meta-Analytic Review. Review of Educational Research, 86(1), 42–78. doi.org/10.3102/0034654315581420
- Murre, J. M. J. und Dros, J. (2015). Replication and Analysis of Ebbinghaus' Forgetting Curve. PLOS ONE, 10(7), e0120644. doi.org/10.1371/journal.pone.0120644
- Pelánek, R. (2016). Applications of the Elo rating system in adaptive educational systems. Computers & Education, 98, 169–179. doi.org/10.1016/j.compedu.2016.03.017
- Prümmer, J., van Steen, T. und van den Berg, B. (2025). Assessing the effect of cybersecurity training on end-users: A meta-analysis. Computers & Security, 150, 104206. doi.org/10.1016/j.cose.2024.104206
- Reinheimer, B., Aldag, L., Mayer, P., Mossano, M., Duezguen, R., Lofthouse, B., von Landesberger, T. und Volkamer, M. (2020). An investigation of phishing awareness and education over time: When and how to best remind users. Sixteenth Symposium on Usable Privacy and Security (SOUPS 2020), 259–284. usenix.org/conference/soups2020/presentation/reinheimer
- Roediger, H. L. und Karpicke, J. D. (2006). Test-Enhanced Learning: Taking Memory Tests Improves Long-Term Retention. Psychological Science, 17(3), 249–255. doi.org/10.1111/j.1467-9280.2006.01693.x
- Rowland, C. A. (2014). The effect of testing versus restudy on retention: A meta-analytic review of the testing effect. Psychological Bulletin, 140(6), 1432–1463. doi.org/10.1037/a0037559
- VanLehn, K. (2011). The Relative Effectiveness of Human Tutoring, Intelligent Tutoring Systems, and Other Tutoring Systems. Educational Psychologist, 46(4), 197–221. doi.org/10.1080/00461520.2011.611369
- Wilson, R. C., Shenhav, A., Straccia, M. und Cohen, J. D. (2019). The Eighty Five Percent Rule for optimal learning. Nature Communications, 10, 4646. doi.org/10.1038/s41467-019-12552-4