A vizsgafolyamatban az alábbi, időben egymást követő 10 szakasz különíthető el:
A folyamatszerű követelmények keretjellegéből következően az egyes szakaszok konkrét tartalma a különböző nyelvvizsgák és egyes nyelvek (pl. kevésbé gyakran oktatott nyelvek) esetében módosulhat, különösen a fent leírt 4. és 8. szakasz vonatkozásában.
A folyamatszerű követelmények differenciálása
A folyamatszerű követelmények függenek:
A folyamatszerű követelmények teljesítéséhez az éles vizsga eredményeinek elemzése céljából az adott vizsgarész feladatait megoldó vizsgázók létszámát kell figyelembe venni, míg a kipróbálás létszámainak meghatározásához az előző naptári év éles vizsgáinak egy vizsgaidőszakra számolt átlagos vizsgázói létszámát kell tekinteni.
Új akkreditációs kérelem esetén a vizsgarendszer nyilatkozik a szintenként és nyelvenként az akkreditációt követő 12 hónap elteltével várható vizsgázói létszámokról, és azok alapján választja meg a kipróbálások létszámait. Szaknyelv esetén a várható vizsgázói létszámokat a benyújtott szükségletelemzéssel összhangban kell megállapítani.
Az alábbi táblázat a folyamatszerű követelmények 4. és 8. pontját részletezi. Kijelöli a differenciálás lehetőségeit, de egyúttal megszabja az alkalmazandó minőségbiztosítási eszközök minimumát is.
Objektív értékelésű feladatok
Együtt kezelt eredmények száma: 1-200 | Együtt kezelt eredmények száma: 201-től | ||
4. Kipróbálás | Kipróbálás létszáma | új akkreditációs kérelem esetén: legalább 6, nyelvtudását tekintve a vizsga célcsoportját képviselő nyelvhasználó, de a megbízhatóság igazolására legalább egy szintből legalább 30 fő | legalább 50, nyelvtudását tekintve a vizsga célcsoportjait képviselő nyelvhasználó, többrétegű minta |
már működő rendszereknél:
|
|||
Elemzés módja |
|
itemanalízis; + probabilisztikus módszerek javasoltak, feladatbank alkalmazása esetén elvártak |
|
Kiszámolandó | itemanalízis esetén kiszámolandó a nehézségi érték, diszkriminációs érték, és az adott készséget mérő feladatsor megbízhatósága | nehézségi érték, diszkrimináció és az adott készséget mérő feladatsor megbízhatósága; probabilisztikus módszerek esetén: illeszkedési mutatók is |
|
Megjegyzés | Amennyiben a kipróbálást követően egy feladat módosul, azt szakmailag indokolt ismét kipróbálni. | A kipróbálást ajánlott összekapcsolt adatfelvétellel végezni. Amennyiben a kipróbálást követően egy feladat módosul, azt szakmailag indokolt ismét kipróbálni. | |
8. Az éles vizsga működése | Elemzés létszáma | együtt kezelt adatok összessége | random mintavétellel: 201-1000 fő: az együtt kezelt adatok 70%-a, de legalább 200 fő; 1001 főtől: az együtt kezelt adatok 50%-a; javasolt: együtt kezelt adatok összessége. |
Elemzés módja |
|
itemanalízis; + probabilisztikus módszerek javasoltak, feladatbank alkalmazása esetén elvártak |
|
Kiszámolandó | itemanalízis alkalmazása esetén: nehézségi érték, diszkrimináció és az adott vizsgarész megbízhatósága, vizsgarészek közötti korreláció | nehézségi érték, diszkrimináció és az adott vizsgarész megbízhatósága; vizsgarészek közötti korreláció; probabilisztikus módszerek esetén: illeszkedési mutatók is |
|
Megjegyzés | A végső elemzések elkészítésének határideje legkésőbb az utolsó vizsgaeseményt követő 60. nap. |
Szubjektív értékelésű feladatok
Együtt kezelt eredmények száma: 1-200 | Együtt kezelt eredmények száma: 201-től | ||
4. Kipróbálás | Kipróbálás létszáma | új akkreditációs kérelem esetén: legalább hat, nyelvtudását tekintve a vizsga célcsoportját képviselő nyelvhasználó | legalább 10, nyelvtudását tekintve a vizsga célcsoportját képviselő nyelvhasználó |
már működő rendszereknél:
|
|||
Elemzés módja | kvalitatív | kvalitatív | |
Kiszámolandó | - | - | |
Megjegyzés | Amennyiben a kipróbálást követően egy feladat módosul, azt szakmailag indokolt ismét kipróbálni. | ||
8. Az éles vizsga működése | Elemzés létszáma | együtt kezelt adatok összessége | együtt kezelt adatok összessége |
Elemzés módja |
|
kvalitatív; páronként sorrendi korrelációs vagy azzal egyenértékű módszer; a skálaitemekre végzett itemanalízis minden vizsgaidőszakban ajánlott, de a kétévenkénti szintillesztés során kötelező. |
|
Kiszámolandó |
|
valamennyi értékelő pár esetében értékelőnként az átlag és szórás; az értékelő párok tagjai közötti megbízhatóság vagy egyetértés; vizsgarészek közötti korreláció; itemanalízis esetén a skálaitemek nehézségi értéke és diszkriminációja és a teljes vizsgarészek megbízhatósága |
|
Megjegyzés | A végső elemzések elkészítésének határideje legkésőbb az utolsó vizsgaeseményt követő 60. nap. |