Bemeneti és kimeneti mérés a felnőttképzésben: mit mér, aki tényleg mér

A felnőttképzés eredményét nem önmagában a záróvizsga vagy a tanfolyam teljesítése mutatja meg. Ehhez a résztvevő állapotát a képzés megkezdésekor és a befejezésekor is mérni kell. A bemeneti mérés rögzíti a kiindulási tudást, készséget és attitűdöt. A kimeneti mérés ugyanazokon a területeken vizsgálja a fejlődést. A két eredmény összevetése teszi lehetővé a hatás értékelését. Ennek alapja a mérési cél, az eszközök kiválasztása, az alkalmazott módszertan és az értékelési szabály. [39] A kizárólag az NSZFH-nál nyilvántartásba vett, felnőttképzési engedéllyel rendelkező képzőintézmények akkreditált programjai jogosultak állami finanszírozásra - forrás: https://ikk.hu/p/iskolarendszeren-kivuli-felnottkepzes

Hogyan épül fel egy megbízható mérési rendszer? Három réteget érdemes megkülönböztetni. Az első a belépési szűrés: mit tud a résztvevő a képzés megkezdése előtt. A második a folyamatközi visszajelzés: hol tart a képzés közben, hol kell beavatkozni. A harmadik a kilépési mérés: mit tud a képzés végén, és mit tud önállóan alkalmazni. Önmagában egyik sem elég. A belépési szűrés önmagában csak csoportosít, a kilépési pedig a hatás megállapítása nélkül csupán osztályoz. A három együtt ad választ arra, hogy a képzés valódi fejlesztést végzett-e, vagy csak a résztvevő előzetes tudását hitelesítette.

A bemeneti mérés feladata a kiindulási állapot rögzítése. A kimeneti mérés feladata a képzés utáni állapot bemutatása. A hatásmérés ezek összevetéséből áll. Fontos, hogy mindkét mérés azonos mérési célokra, tartalmakra és szabályokra épüljön. [41] A módszertan akkor ad biztos alapot a döntésnek, ha megmutatja, mit mérünk, kivel mérünk, mikor mérünk, és hogyan értékeljük az eredményt. A felnőttképzésben a mikrotanúsítványt adó képzések a felsőoktatási pilot projektek után indíthatók - forrás: https://www.ikk.hu/hirek/-uj-korszak-a-felnottkepzesben-indulnak-a-mikrotanusitvanyt-ado-kepzesek

A bemeneti és a kimeneti mérés összevetése nem adminisztrációs teher, hanem a felnőttképzés legfontosabb szakmai eszköze. Aki csak a képzés végén mér, az nem méri a képzést, hanem csak a belépő tudásszintet írja le újra. A kormány is ezért tűzte ki, hogy 2030-ig 2,5 millió ember szerezzen MI-kompetenciát, hiszen ekkora létszámnál már nem elég a belépő szint felmérése, a kimeneti tudás változását is igazolni kell.

Az állami finanszírozás kizárólag az NSZFH-nál nyilvántartásba vett, felnőttképzési engedéllyel rendelkező intézmények akkreditált programjain keresztül érhető el, ezért a mérést is e keretrendszerben kell értelmezni. A stratégia szerinti 2,5 millió fő MI-kompetencia-erősítése a programok széles körében generál bemeneti és kimeneti mérési kötelezettséget, így a tervezéshez elengedhetetlen a jogosulti kör és az akkreditációs státusz pontos ismerete. A mikrotanúsítványt adó rövid képzések a felsőoktatási pilot projektek után a felnőttképzésben is indíthatók, ami új, modulszintű mérési pontok beépítését teszi szükségessé. E modulok rövidek, ezért a mérést gyakorlatorientált, azonnali visszacsatolást adó eszközökkel érdemes végrehajtani.

A bemeneti mérés a résztvevő induló tudását, tapasztalatát és tanulási szükségletét tárja fel, és ezzel teremt összehasonlítható alapot a későbbi kimeneti méréshez. A kimeneti mérés a képzés végén igazolja, hogy a résztvevő a meghatározott kompetenciát valóban elsajátította-e, így a két adat együtt hitelesíti a program eredményességét. Önmagában egyik sem elégséges, mert a belépő szint ismerete nélkül a kimeneti érték nem értelmezhető. A mikrotanúsítvány esetén a modulok rövidsége miatt a kimeneti mérést közvetlenül a teljesítés után kell elvégezni, és a bemeneti szintet legalább önértékeléssel kell rögzíteni. Az akkreditált programok dokumentációjában a mérési tervnek igazodnia kell az NSZFH által elvárt formátumhoz.

A hatásmérés a kimeneti mérésből indul, és azt vizsgálja, hogy a megszerzett tudás a munkahelyi vagy egyéb gyakorlatban mennyire hasznosul, ezért a módszertanban elkülönül a tudásszint-ellenőrzéstől. A hatásmérést érdemes a képzés után néhány hónappal megismételni, így a viselkedés-változás és a munkahelyi alkalmazás nyomon követhető. A mikrotanúsítványoknál a hatásmérés különösen fontos, mert a rövid képzés gyors alkalmazási lehetőséget ad, és a hasznosulás a stratégia 2030-ig terjedő céljainak teljesüléséhez is hozzájárul. A felnőttképzési engedéllyel rendelkező intézmények akkreditált programjai e hatást dokumentáltan tudják igazolni.

Ha a program az NSZFH-nál nyilvántartásba vett, felnőttképzési engedéllyel rendelkező intézmény akkreditált képzése, akkor az állami finanszírozású pályázatokból önrész nélkül, tisztán támogatásból megvalósítható.

A bemeneti és a kimeneti mérés a felnőttképzésben nem két külön riport, hanem egyetlen gondolati ív két vége. Ha külön kezeljük, csak a záró számokat látjuk: kik indultak, kik zártak. Összevetve viszont az is látható, mennyit változott a résztvevő tudása, és ehhez képest mit tett hozzá maga a képzés. A kormányzati szándék egyértelmű: a hazai mesterséges intelligencia stratégia 2030-ig 2,5 millió embert céloz meg MI-kompetenciával. Ez a cél akkor hiteles, ha minden egyes képzésnél meg tudjuk mutatni, mit tudott a résztvevő belépéskor, és mit visz haza.

Az első lépés tehát a belépési szint mérése. Ez nem adminisztráció, hanem tartalmi nullapont: nélküle minden későbbi szám csak önmagához mér. Jó belépési mérés az, amelyik ugyanazt a feladattípust használja, mint a kimeneti, hogy a két végeredmény valóban összevethető legyen. Az állami finanszírozásra jogosult, akkreditált felnőttképzési programok az NSZFH nyilvántartásában érhetők el, és a mérési kultúra is ezekhez a képzésekhez kötődik. Aki ezen a ponton spórol, az a kimeneti mérés hitelét is elveszti.

A második lépés a kimeneti mérés, amely soha ne csak elégedettség-kérdőív legyen. Az elégedettség fontos, de hangulati adat, tanulási adat nem lesz belőle. Kimeneti mérés az, amelyik azonos konstrukcióval méri ugyanazt a kompetenciát, mint belépéskor, és így képes megmutatni az egyéni előrehaladást. A mikrotanúsítványt adó képzések a felsőoktatási pilotok után a felnőttképzésben is megjelennek, és ezeknél a tanúsítvány csak akkor lesz piacképes, ha a mögötte lévő mérés megállja a helyét akár külső audit előtt is.

A harmadik lépés a kettő összevetése. Ekkor derül ki, hogy a képzés valódi hatásmérésről szól-e, vagy csak egy kellemes statisztikát akar felmutatni. Az összevetésnél fontos a módszertani tisztaság: azonos teszt, azonos feltételek, azonos értékelési skála. Ahol ez hiányzik, ott a kettő külön-külön mutat, de együtt nem mond semmit. A felnőttképzési akkreditáció és az állami források pont azt várják el, hogy ez az összevetés dokumentált, megismételhető és védhető legyen szakmai vitában.

A negyedik lépés a hatásmérés, amely túlmutat a kurzus végén. Kérdés, hogy a megszerzett kompetencia hat hónap múlva is él-e, átkerül-e a munkahelyre, megjelenik-e a résztvevő magatartásában. A valódi hatásmérés mindig több idősíkon mér, és mindig vállalja, hogy a képzés egy része nem feltétlenül hatékony. A kormányzati MI-célok teljesülése is csak akkor ellenőrizhető, ha a hatást nemcsak a tanúsítvány átvételéig mérjük.

A bemeneti mérés önmagában nem sokat mond: a résztvevő induló tudása legfeljebb kiindulópont. A kimeneti mérés önmagában félrevezető lehet, hiszen a magasabb pontszám nem feltétlenül a képzés érdeme. A kettő együtt ad értelmezhető képet, feltéve, hogy a mérőeszköz ugyanazt a kompetenciát méri mindkét időpontban, és a mérés módszertana dokumentált. Szakmai vitában az a program védhető, amelyiknél a bemenet és a kimenet különbsége visszavezethető a képzési tartalomra, nem pedig külső tényezőkre. A hatásmérés harmadik lépcsője azt vizsgálja, hogy a megszerzett tudás a munkahelyen, illetve a mindennapi gyakorlatban is megjelenik-e. Ez a három szint - belépés, kilépés, hasznosulás - együtt felel meg a minőségbiztosítási elvárásoknak.

A mérések megtervezéséhez érdemes a képzési program leírásából kiindulni, és minden tanulási eredményhez legalább egy mérési módot rendelni. Az ismeretszintű célokhoz írásbeli teszt, a készségszintűekhez gyakorlatorientált feladat, a kompetenciaszintűekhez pedig megfigyelésen alapuló értékelés illeszkedik. A mérőeszközt érdemes a képzés indítása előtt próbaüzemre bocsátani, a teszt kitöltési idejét és az egyes tételek nehézségét is vizsgálni. Az így kapott visszajelzések alapján a mérés finomítható, így a későbbi kimeneti adatok megbízhatóbban hasonlíthatók össze a bemeneti értékekkel. A dokumentáció részeként célszerű a mérési módszertant, a mintanagyságot és a kizárási szempontokat is rögzíteni.

A felnőttképzésben a mikrotanúsítvány bevezetése a felsőoktatási pilot projektek után a felnőttképzésben is indítható, ami a mérési gyakorlatot is átalakítja. A rövid, kreditértékkel bíró programoknál ugyanis a kimeneti mérés nem pótolható utólagos önértékeléssel. Mivel kizárólag az NSZFH-nál nyilvántartásba vett, felnőttképzési engedéllyel rendelkező képzőintézmények akkreditált programjai jogosultak állami finanszírozásra, a belső mérési rendszer a minőségbiztosítás látható bizonyítéka.

Az állami finanszírozású felnőttképzési programok esetében a mérési kötelezettség a minőségbiztosítás alapfeltétele, nem pedig adminisztratív teher. Csak az NSZFH-nál nyilvántartásba vett, felnőttképzési engedéllyel rendelkező intézmények akkreditált programjai jogosultak állami támogatásra, és ez a keretrendszer a mérési előírásokra is kiterjed. A Magyarország Mesterséges Intelligencia Stratégiájában megfogalmazott cél, hogy 2030-ig 2,5 millió ember szerezzen MI-kompetenciát, közvetlen hatással van a felnőttképzés méréseire: a rövidebb, célzott programok eredményességét gyors, validált mérőeszközökkel kell alátámasztani, hogy a képzési ráfordítás valóban kimutatható tudásnövekedéssé váljon.

A felnőttképzésben a képzés valódi értékét nem a résztvevői létszám és nem is az óraszám mutatja meg, hanem az, hogy a résztvevő a képzés előtti tudásszintjéhez képest mit tud a végén. A bemeneti és a kimeneti mérés együttes alkalmazása ad választ arra, hogy a képzés milyen fejlődést hozott, és hogy az intézmény által vállalt kimeneti kompetenciák ténylegesen teljesültek-e. A szakmai vitában csak az a mérési rendszer állja meg a helyét, amely a tudásszintet és a gyakorlati alkalmazhatóságot egyaránt vizsgálja.

A kizárólag az NSZFH-nál nyilvántartásba vett, felnőttképzési engedéllyel rendelkező képzőintézmények akkreditált programjai jogosultak állami finanszírozásra, ezért a mérések módszertanát érdemes eleve úgy megtervezni, hogy az megfeleljen a nyilvántartás és az ellenőrzés követelményeinek. A mikrotanúsítványt adó képzések a felsőoktatási pilot projektek után a felnőttképzésben is indíthatók, így a rövid, moduláris programoknál különösen fontos, hogy a bemeneti és a kimeneti mérés illeszkedjen a mikrotanúsítvány követelményeihez. A mérések célja ezzel összhangban nem a résztvevők szűrése, hanem a fejlődés kézzelfogható igazolása.

A Magyarország Mesterséges Intelligencia Stratégiája 2030-ig 2,5 millió ember MI-kompetencia megszerzését tűzte ki célul, és ez a cél a felnőttképzésben ismételten felértékeli a megbízható mérést. A stratégia teljesülését ugyanis csak úgy lehet tényszerűen nyomon követni, ha a képzőintézmények egységes, összehasonlítható módszertannal mérik a résztvevők tudását a képzés előtt és után. A hatásmérés így nem kiegészítő adminisztráció, hanem a stratégiai cél teljesítésének alapfeltétele.

A gyakorlatban a bemeneti mérés a meglévő tudás és a tanulási igény feltárását szolgálja, a kimeneti mérés pedig a vállalt kompetenciák meglétét igazolja. A kettő összevetése ad választ arra, hogy a képzés valóban hatott-e, és hogy a résztvevő a munkaerőpiacon ténylegesen használható tudásra tett szert. A hatásmérés harmadik lépcsője, a képzés utáni nyomon követés pedig azt vizsgálja, hogy a megszerzett kompetencia a munkahelyen, a munkafolyamatokban vagy a továbbtanulásban megjelenik-e. A három szint együtt ad képet arról, hogy a felnőttképzési befektetés megtérül-e.