{"id":5410,"date":"2023-04-12T13:18:30","date_gmt":"2023-04-12T13:18:30","guid":{"rendered":"https:\/\/www.bvmberatung.net\/?p=5410"},"modified":"2023-12-20T10:00:26","modified_gmt":"2023-12-20T10:00:26","slug":"lernerfolg","status":"publish","type":"post","link":"https:\/\/www.bvmberatung.net\/fr\/lernerfolg\/","title":{"rendered":"&#8222;Lernerfolg und -transfer: Wie messen?&#8220; von Gastautor Kuno Roth"},"content":{"rendered":"<p><em>Die B&#8217;VM freut sich, mit Kuno Roth einen ersten Gastblogger zu begr\u00fcssen. Als <em>Co-Pr\u00e4sident einer NPO und selbst\u00e4<\/em>ndiger Berater teilt er hier seine Erfahrungen im Bereich des organisationalen Lernens mit Ihnen.<\/em><\/p>\n\n\n\n<hr class=\"wp-block-separator has-alpha-channel-opacity is-style-dots\"\/>\n\n\n\n<p>Wie war er? Was war gut, was weniger? Wie war die Kursleitung auf einer Skala von 1 bis 10? \u2013 und so weiter: Am Schluss eines Kurses folgt dessen Auswertung stets auf dem Fuss.<\/p>\n\n\n\n<p>Solche Output-Messungen gehen von der Annahme aus, kommt ein Kurs gut an, dass er die gew\u00fcnschte Wirkung in der Praxis entfalten wird. Ein Trugschluss. Meistens. Denn die Forschung (1) zeigt, dass es praktisch keine Korrelation gibt zwischen der unmittelbaren Beurteilung eines Kurses und seiner langfristigen Wirkung, also dem Transfer des Gelernten in die Praxis. Und forscht man in seinen eigenen Erfahrungen, weiss man: Was du nicht anwendest, vergisst du wieder &#8211; man h\u00e4tte sich also den Kurs ersparen k\u00f6nnen. Denn auf die Wirkung danach in der Praxis kommt es an: In meiner letzten Kolumne \u00ab<a href=\"https:\/\/www.kampagnenforum.ch\/de\/blog\/2022-12-02\/lernen-von-seinesgleichen\" target=\"_blank\" rel=\"noopener\">Lernen von Seinesgleichen<\/a>\u00bb versuchte ich zu zeigen, dass diese Wirkung erheblich verst\u00e4rkt werden kann. Indem sich zwei Abg\u00e4nger:innen als Peer-Learning-Paar zusammentun, st\u00fctzen sie sich gegenseitig und erh\u00f6hen so den Transfer in die Praxis.&nbsp;<\/p>\n\n\n\n<p>In dieser Kolumne folgt nun die Frage, wie man denn messen kann, ob und wie viel Transfer stattfindet. Unter Lerntransfer versteht man dabei, inwieweit neu Gelerntes wie eine F\u00e4higkeit, ein Tool oder eine Technik in den beruflichen Alltag \u00fcbertragen und angewendet werden kann. Doch wie misst man Lerneffekte und Wirkungen? Diese k\u00f6nnen ja nicht wie ein Gewicht oder eine Temperatur direkt und absolut gemessen werden; sondern sie dr\u00fccken sich in nicht direkt messbarer Ver\u00e4nderung von Verhalten aus.&nbsp;<\/p>\n\n\n\n<p>Davon sp\u00e4ter; zuerst ein paar Worte zur Theorie: Die Forschung zur Wirkung betrieblicher Weiterbildung wurde wegweisend von Donald Kirkpatrick begr\u00fcndet (<a href=\"https:\/\/de.wikipedia.org\/wiki\/Donald_Kirkpatrick\" target=\"_blank\" rel=\"noreferrer noopener\">Wikipedia<\/a>), der 1959 das nach ihm benannte Modell zur Wirkungsmessung von Ausbildungen und Kursen publizierte. Es ist vierstufig (visualisiert z.B. in dieser Grafik):<\/p>\n\n\n\n<figure class=\"wp-block-image size-large\"><img fetchpriority=\"high\" decoding=\"async\" width=\"1024\" height=\"523\" src=\"https:\/\/www.bvmberatung.net\/wp-content\/uploads\/kirkpatrick_grafik_blog-1024x523.jpg\" alt=\"\" class=\"wp-image-5413\" srcset=\"https:\/\/www.bvmberatung.net\/wp-content\/uploads\/kirkpatrick_grafik_blog-1024x523.jpg 1024w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/kirkpatrick_grafik_blog-760x389.jpg 760w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/kirkpatrick_grafik_blog-768x393.jpg 768w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/kirkpatrick_grafik_blog-18x9.jpg 18w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/kirkpatrick_grafik_blog.jpg 1162w\" sizes=\"(max-width: 1024px) 100vw, 1024px\" \/><\/figure>\n\n\n\n<ul class=\"wp-block-list\">\n<li>Auf Stufe 1 wird von den Teilnehmer:innen ein Feedback eingeholt: Die unmittelbare \u00abReaktion\u00bb.<\/li>\n\n\n\n<li>Auf Stufe 2 erfolgt eine Wissensabfrage nach dem Kurs z.B. als Test oder Quiz zu den \u00abLerninhalten\u00bb.&nbsp;<\/li>\n\n\n\n<li>Stufe 3 beinhaltet besagten Lerntransfer in die Praxis: Gibt es \u00c4nderungen im \u00abVerhalten\u00bb?&nbsp;<\/li>\n\n\n\n<li>Auf Stufe 4 geht es um die langfristigen \u00abResultate\u00bb, also die Wirkungen in der Aussenwelt, wie z.B. mehr Umsatz f\u00fcr eine Firma oder gesellschaftliche Wirkung einer NGO.&nbsp;<\/li>\n<\/ul>\n\n\n\n<p><strong>Unklare Zust\u00e4ndigkeit auf Stufe 3 ist Teil des Problems<\/strong><\/p>\n\n\n\n<p>Kirkpatrick\u2019s Lehre gem\u00e4ss sollten auf jeder Stufe Wirkungsmessungen erfolgen, doch in der Praxis geschieht dies meistens nur auf den Stufen 1 und 2 \u2013 also unmittelbar am Kursende. Das ist am einfachsten zu haben, nur sagt es eben nicht viel aus. Der Grund, warum auf der eigentlich relevanten Stufe 3 kaum gemessen wird, ist der h\u00f6here Aufwand und die Frage der Zust\u00e4ndigkeit, die von der Ausbildnerin zum Betrieb wechselt, wo oft nicht klar ist, wer zust\u00e4ndig ist. Dabei ist es eben dieser Transfer, woran sich letztlich die Wirksamkeit der Investitionen in Weiterbildung misst. Dieser ist Voraussetzung daf\u00fcr, damit das eigentlich Gew\u00fcnschte auf Stufe 4 geschehen kann: Eine Verbesserung des Ergebnisses einer Firma, eines Projektes oder einer Kampagne. Der \u00abReturn on Learning Investment\u00bb, sozusagen.<\/p>\n\n\n\n<p>Kirkpatrick\u2019s Modell ist ein lineares Modell, das suggeriert, wenn Stufe 1 und 2 gute Ergebnisse bringen, ebensolches auf den weiteren Stufen geschehen werde, was aber wie gesagt nicht automatisch der Fall ist. Trotzdem ist es n\u00fctzlich, um sich des ganzen Lernprozesses bewusst zu werden. Ausserdem haben es seine Kinder durch verst\u00e4rkte Prozessorientierung verbessert. Es heisst nun&nbsp;<a href=\"https:\/\/www.kirkpatrickpartners.com\/Our-Philosophy\/The-New-World-Kirkpatrick-Model\" target=\"_blank\" rel=\"noreferrer noopener\">New Kirkpatrick<\/a>&nbsp;&#8211; mit u.a. folgenden Mehrwerten (siehe&nbsp;<a href=\"https:\/\/docs.google.com\/document\/d\/1FWjgpSOXiwBWNrRzrasDjYj4sFJYAGpKEDdTXqx3r5I\/edit#bookmark=id.ysjlc8wd6rhl\" target=\"_blank\" rel=\"noreferrer noopener\">Graphik unten<\/a>):&nbsp;<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li>Fragt man auf Stufe 2 nicht nur das gelernte Wissen ab, sondern auch, ob die Kursabg\u00e4nger:innen zuversichtlich sind, das Gelernte \u00fcbertragen zu k\u00f6nnen (\u2018Confidence\u2019) und ob sie bereit sind, das Gelernte anzuwenden (&#8218;Commitment&#8216;), kann die Wahrscheinlichkeit eines Transfers eingesch\u00e4tzt werden: \u00abJe h\u00f6her Zuversicht und Bereitschaft desto Transfer\u00bb.<\/li>\n\n\n\n<li><em>New Kirkpatrick<\/em>&nbsp;nimmt die Stufe 4 zum Ausgangspunkt, Weiterbildungsmassnahmen festzulegen. Man z\u00e4umt also das Pferd von hinten auf und fragt sich, welche Kapazit\u00e4ten, F\u00e4higkeiten, Teamgeist oder welches Knowhow es braucht, um die gew\u00fcnschten Betriebsresultate zu erreichen. Oder im Fall der NGOs: Welche gesellschaftliche \u00c4nderung wird angestrebt? Und was braucht es innerbetrieblich f\u00fcr Voraussetzungen daf\u00fcr? Und folglich: Wie k\u00f6nnen Campaigner, Projektleiterinnen oder Teams die n\u00f6tigen Kompetenzen erlangen und in der Praxis anwenden?&nbsp;<\/li>\n\n\n\n<li>Diese Lern- und Transferprozesse werden begleitet und \u00fcberpr\u00fcft; aber nicht als Kontrolle, sondern zusammen mit den Beteiligten, damit sie wahrscheinlicher erreichen, was sie selber wollen.&nbsp;<\/li>\n\n\n\n<li>Unterst\u00fctzungen wie Ermutigung (<em>encourage<\/em>, z.B. Zeit zum Ausprobieren), Belohnung (<em>reward<\/em>; z.B. Anerkennung im Team) und Verst\u00e4rkung (<em>reinforcement<\/em>; z.B. Peer-Support oder Mentoring) verst\u00e4rken den Lerntransfer erheblich. Und werden Weiterbildungsmassnahmen zusammen abgemacht, k\u00f6nnen solche Transferangebote von Anfang an in den Prozess miteinbezogen werden (siehe \u00ab<a href=\"https:\/\/docs.google.com\/document\/d\/1bWULIfJjblJ3HtKfXO3C0z1EkXPB2VwzjbGkQHl8G1U\/edit?usp=sharing\" target=\"_blank\" rel=\"noreferrer noopener\">Toolkit for Learning Transfer<\/a>\u00bb).&nbsp;<\/li>\n<\/ul>\n\n\n\n<p><strong>Und wie misst man nun?&nbsp;<\/strong><\/p>\n\n\n\n<p>Normalerweise mit einem Fragebogen, mit dem man nach verschiedenen Zeiten &#8211; 3, 6, 9, und\/oder 12 Monate &#8211; erhebt, wie die Kursabg\u00e4nger:innen in der Selbstbeurteilung und im Urteil ihres Umfeldes, welche Teile des Gelernten umsetzen und wo sie scheitern. Das ist sehr aufw\u00e4ndig (siehe Fussnote (1B)). Weniger aufw\u00e4ndig sind Fokusgruppen oder Interviews, also die Erhebung qualitativer Daten, mit welchen man zwar nicht misst, aber ein gutes Gef\u00fchl und ein Bild davon bekommt, was funktioniert und was nicht. Frageb\u00f6gen und Ratings gibt es sowieso eher zu viele.<\/p>\n\n\n\n<p>Fazit: Ein Bewusstsein f\u00fcr Lernmethoden zu entwickeln, ist f\u00fcr Kampagnenarbeit von grosser Relevanz. Zumal ja Kampagnen gesellschaftliche Lerninterventionen sind, denn jeder (gew\u00fcnschten) \u00c4nderung unterliegt ein Lernprozess. Doch auch bei Kampagnen erfolgt die Messung von ihren Wirkungen oft nur bis Stufe 2, indem man z.B. unmittelbar nach einer Aktivit\u00e4t oder Publikation die Medienresonanz auswertet oder R\u00fcckmeldungen einholt. Das ist gut, gen\u00fcgt aber nicht. F\u00fcr den eigentlichen Transfer und die Wirkungsmessung sind oft die Ressourcen nicht eingeplant.<\/p>\n\n\n\n<p><br>PS: Im Zuge der Digitalisierung findet betriebliche Weiterbildung zunehmend online statt, wof\u00fcr sogenannte Learning Management Systems (LMS) eingesetzt werden. Dies birgt zwei Gefahren:&nbsp;<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li>Dass man sich nun durch viele, viele Lerninhalte klickt. In der Meinung, das sei effizient, gibt man so der Quantit\u00e4t gegen\u00fcber der Qualit\u00e4t Vorrang. Aber \u00abzeitsparend-effizient\u00bb lernen geht nicht. Lernen verkommt zum Surfen; doch haften bleibt nur, was man anwendet.<\/li>\n\n\n\n<li>Auf Stufe 3 verst\u00e4rkt sich online die Problematik des mangelnden Transfers, namentlich beim interpersonalen Lernen wie Teambildung, Feedbackgeben, Projektleitung oder Leadership. Solche Lerninhalte brauchen Hybrid-Angebote, on- und offline. Denn Knowhow und Kompetenz k\u00f6nnen nicht theoretisch erworben werden.<\/li>\n<\/ul>\n\n\n\n<p>Und die Chancen sind: LMS haben unschlagbare Vorteile, wie etwa die Individualisierung von Inhalten und Lerntempi, videobasierte Tutorials oder die einfache Erfassung des Lernerfolgs auf Kirkpatrick Stufe 1 und 2.&nbsp; Und wird Lernen als Lernreise (<em>learning journey<\/em>) konzipiert und der Praxistransfer im LMS eingef\u00e4delt, kann der Trend zum selbstorganisierten Lernen genutzt werden.<\/p>\n\n\n\n<p><em>(1) z.B.: A) \u00ab<a href=\"https:\/\/lit.bibb.de\/vufind\/Record\/DS-150675\/Description\" target=\"_blank\" rel=\"noreferrer noopener\">Der Mythos Wirkungskette in der Weiterbildung &#8211; empirische Pr\u00fcfung der Wirkungsannahmen im Four Levels Evaluation Model von Donald Kirkpatrick<\/a>\u00bb;&nbsp; Zeitschrift f\u00fcr Berufs- und Wirtschaftsp\u00e4dagogik (2011) B) \u00ab<a href=\"https:\/\/transfer.vet\/wie-weiterbildung-messbar-wird\/\" target=\"_blank\" rel=\"noreferrer noopener\">Wie Weiterbildung messbar wird<\/a>\u00bb, Gesellschaft f\u00fcr angewandte Berufsbildungsforschung (2018)<\/em><\/p>\n\n\n\n<figure class=\"wp-block-image size-large\"><img decoding=\"async\" width=\"1024\" height=\"575\" src=\"https:\/\/www.bvmberatung.net\/wp-content\/uploads\/greenpeace-grafik-learning-transfer-1024x575.jpg\" alt=\"\" class=\"wp-image-5415\" srcset=\"https:\/\/www.bvmberatung.net\/wp-content\/uploads\/greenpeace-grafik-learning-transfer-1024x575.jpg 1024w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/greenpeace-grafik-learning-transfer-760x427.jpg 760w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/greenpeace-grafik-learning-transfer-768x431.jpg 768w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/greenpeace-grafik-learning-transfer-18x10.jpg 18w, https:\/\/www.bvmberatung.net\/wp-content\/uploads\/greenpeace-grafik-learning-transfer.jpg 1440w\" sizes=\"(max-width: 1024px) 100vw, 1024px\" \/><\/figure>\n\n\n\n<hr class=\"wp-block-separator has-alpha-channel-opacity is-style-dots\"\/>","protected":false},"excerpt":{"rendered":"<p>Wie messe ich den Lerneffekt und die Wirkung nach einem Kurs? Dieser Frage geht Kuno Roth im folgenden Blog nach.<\/p>","protected":false},"author":6,"featured_media":5419,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[39],"tags":[127,261,243,104,244,247],"beitragskategorie":[295,313,306],"class_list":["post-5410","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-blogbeitraege","tag-bvmbloggt","tag-gastblogger","tag-lernen","tag-npo","tag-peer","tag-wirkungsmessung","beitragskategorie-agilitaet-fuer-organisationen","beitragskategorie-gastbloggerin","beitragskategorie-organisationsentwicklung"],"_links":{"self":[{"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/posts\/5410","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/users\/6"}],"replies":[{"embeddable":true,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/comments?post=5410"}],"version-history":[{"count":3,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/posts\/5410\/revisions"}],"predecessor-version":[{"id":6508,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/posts\/5410\/revisions\/6508"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/media\/5419"}],"wp:attachment":[{"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/media?parent=5410"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/categories?post=5410"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/tags?post=5410"},{"taxonomy":"beitragskategorie","embeddable":true,"href":"https:\/\/www.bvmberatung.net\/fr\/wp-json\/wp\/v2\/beitragskategorie?post=5410"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}