Bővebb ismertető
pedagógia
írott szöveg értésének mérése és ennek statisztikai értékelése a Zöld Út középfokú gazdálkodásmenedzsment szakmai nyelvvizsgán
BEKE JUDIT - TICK ANDRE.\ KKFK
A középfokú írásbeli szakmai nyelvvizsga tesztfejlesztése során matematikai statisztikai módszerek segítségével a próbatesztek megíratása után kerül sor a tesztek továbbfejlesztésére, tökéletesítésére. Ezen módszerek alkalmazásával kerülnek ki a „rossz" kérdések, és kerülnek be újabb tesztkérdések a szakmai nyelvvizsga tesztbe. Jelen cikk azt kívánja bemutatni, hogyan készülnek a középfokú írásbeli szakmai (gazdálkodásmenedzsment) nyelvvizsga feladatai az SPSS programcsomag felhasználásával, annak érdekében, hogy a különböző statisztikai módszerekkel kapott eredményeket a tesztfejlesztók a feladatok folyamatos tökéletesítésére használhassák fel. Továbbá a cikk bemutatja, milyen egyéb kövedceztetések vonhatók le a hallgatók eredményeiből a vizsgát követően, és ezzel kíván a további oktatói és feladatírói' mimkához segítséget nyújtani.
Bevezetés
A vizsgaanyag elkészítéséhez két autentikus angol nyelvű szövegre van szükség, egy gazdasági szaknyelvi szövegre, és egy környezetgazdálkodás témájúra, jelen esetben a „Riverside properties" és a „Paper, plastic ot something better" című szövegeket használtuk (Id. 1 sz. melléklet). A nyelvvizsga ezen részével az olvasott szöveg értésének készségét vizsgáljuk. Statisztikai vizsgálatokkal döntjük el, hogy a kiválasztott autentikus szöveghez írt kérdések megbízhatóan mérik-e az adott készséget (olvasott szöveg értése). A tesztek készítéséhez olyan eljárásokat és módszereket használunk, amelyekkel a feladatírás során elkövetett hibákat, pontatlanságokat folyamatosan ellenőrizni mdjuk, így azokat kiküszöbölhetjük, vagyis a tesztek minőségét javíthatjuk. Általában a tesztek jellemzésében három ún. jóságmutató játszik központi szerepet: a tárgyszerűség (objektivitás^, a megbízhatóság (reliabilitás^ és az érvényesség (validitás"*).
1. Előtesztelés
¦ i: ii
1 ; { i"] ¦
, 1
.\z írásbeli nyelvvizsga feladatsorait minden esetben előtesztelésnek vetjük alá. Az előtesztelés (pretesztelés) a vizsgaanyagok fejlesztésének azt a szakaszát jelenti, amikor a feladatokat a célpopulációból vett reprezentatív mintán kipróbáljuk. Az előtesztelés célja az, hogy az eredmények statisztikai elemzése után kiderüljön, melyek a jól és a rosszul mérő itemek^. A fent említett, újonnan elkészített tesztelésre szánt feladatsort először főiskolai, egyetemi hallgatóinkkal
' Feladatíró; egy vizsgaközpont hivatalosan kiképzett és a képzésről tanúsítvánnyal rendelkező munkatársa, aki a központhoz tartozó vizsgarendszer keretén belül nyelvvizsgafeladatokat készít (NY.\T).
- Objektivitás (tényszerűség): az előírt körülmények között a felvevőtől függetlenül jól használható és megismételhető eredményekkel szolgáljon, illetve a teszteredmények értékelését és értelmezését ne torzíthassák szubjektív tényezők. (Psidium)
^ Reliabilitás (megbízhatóság): a mérőeszköz minél megbízhatóbban és pontosabban mérje az adott tulajdonságot. (Psidium)
' Validitás (érvényesség): a teszt, illetve annak minden egyes skálája valóban azt a jelenséget, tulajdonságot mérje, amire készítői szánták, és ne valami mást. vagyis érvényes eredményekkel szolgáljon az adott mérendő jellemzők tekintetében, fgy biztosított, hogy az eredményekből levont következtetések és előrejelzések érvényesek legyenek. (Psidium)
' Item: minden olyan mérési egység egy feladaton belül, amely külön pontot vagy pontokat kap; egy teszt legkisebb önállóan értékelhető egysége. NY.\T 2008.
NYEL^i^G