A fejlesztés egyik kiemelt területe orosz oktatás tovább modern színpad célja a teljes értékű oktatáshoz való hozzáférés és esélyegyenlőség biztosítása, valamint a szakmai oktatási szolgáltatások alapvetően új minőségének elérése. E célok elérésének fő eszköze nyilvánvalóan az információs technológia szerepének és jelentőségének növelése. Az intelligens oktatási rendszerek kiépítése nagy lépés az elektronikus pedagógiai tartalom fejlesztése és felhalmozása felé, amely ma hipertextből, elektronikus anyagokból és tesztekből áll. Az új tanulási rendszerekkel szemben támasztott fő követelmények a következők: intelligencia, skálázhatóság, nyitottság, rugalmasság és alkalmazkodóképesség a tanulási folyamat minden szakaszában.
Az utóbbi időben egyre nagyobb mértékben alkalmazzák különböző szakaszaiban oktatási folyamat kapott különféle elektronikus diagnosztikai mechanizmusok (anyagok) - számítógépes tesztek. Sajnos a hagyományos tesztelés, amelyet szabványosított tesztekkel valósítanak meg, fokozatosan elveszti jelentőségét. Fejlődik, és az adaptív tesztelés modern, hatékonyabb intelligens formáivá fejlődik. Intelligens űrlapok A tudásdiagnosztika a hagyományostól eltérő elméleti és módszertani alapokon, valamint a tesztek felépítésének és reprodukálásának egyéb technológiáira épül. A rendszermodellnek tartalmaznia kell olyan modulokat, amelyek adaptív algoritmusokat valósítanak meg.
Az adaptív tesztelés legfőbb előnye a hagyományos formával szemben nyilvánvaló hatékonysága. Az adaptív teszt lehetővé teszi a tesztet teljesítő tudásszintjének diagnosztizálását lényegesen kisebb számú kérdés felhasználásával. Amikor ugyanazt az adaptív tesztet használják, a magas szintű képzettséggel rendelkező és az alacsony képzettségi szinttel rendelkezők teljesen különböző feladatok részhalmazait oldják meg. Az első alany lényegesen több kérdést fog látni magas nehézségi együtthatóval, a második pedig alacsony. A helyes válaszok aránya a tantárgyak között azonos lehet, de a pontok száma jelentősen eltérhet.
Az adaptív tesztelés lehetővé teszi a tesztek résztvevőinek tudásmodelljének (elsajátított kompetenciáinak) pontosabb felépítését. A számítógépes tesztelési rendszer közvetlenül a tesztelési folyamat során alkalmazkodik a felhasználó szintjéhez. A rugalmas adaptációs mechanizmusoknak köszönhetően a rendszer meg tudja határozni, hogy az adott időpillanatban melyik kérdést és milyen nehézségi együtthatóval kell az alany elé terjeszteni. Például egy alany elkezd egy diagnosztikai halmazt megoldani, és egy b nehézségi együtthatójú feladat elé kerül, amelynek megoldása valamilyen S kis didaktikai egység keretein belül teszteli a tudást. akkor a rendszer analitikai magja kiválasztja a következő feladatot ugyanazon az S egységen belül, de magasabb komplexitási együtthatóval stb. Ha az alany helytelenül válaszol a didaktikai elem kiinduló kérdésére, akkor alacsonyabb nehézségi együtthatójú feladatot kap, stb. A komplexitási együtthatók határértékeit a diagnózisban használt modell írja le.
A számítógépes intelligens adaptív tesztelési rendszernek a következő jellemzőkkel kell rendelkeznie:
Nyitottság és bővíthetőség . A rendszert moduláris alapon kell felépíteni. Az alapmodulok hozzávetőleges összetétele a következő lehet: „Alap”, „Tesztelő”, „Tervező”, „Konfigurátor”, „Jelentéstervező”, „Tervezési modul”, „Alap” a felhasználói lista vezetésére szolgál. program telepített példánya, tantárgylista készítése, tantárgycsoportok könyvtárának kezelése, speciális tér konfigurálása (tematikus blokkokra bontás). A "Constructor" tesztfeladatok adatbázisával való munkára és tesztcsomagok fejlesztésére szolgál. A „Configurator” a tesztelési munkaelemek beállítására szolgál (tesztek összekapcsolása, tesztelési munkamenetek hozzárendelése). A „Jelentéstervező” elsődleges tesztelési protokollok feldolgozására és különféle jelentések készítésére szolgál. A „Tervezési modul” a tesztelési folyamat megtervezésére és nyomon követésére szolgál. A tesztelő közvetlenül alkalmaz adaptív mechanizmust a tudásszint diagnosztizálására.
A diagnosztikai tartalom reprodukálásának nemlinearitása. A következő tesztfeladat adaptív intelligens kiválasztását kell megvalósítani az előzőek megoldásának eredményétől függően.
Ismert nehézség . Minden tesztfeladatot nehézségi kategóriákra kell osztani, és megfelelő együtthatóval kell rendelkeznie, amelyet az adaptációs folyamat során lehet manipulálni.
A diagnosztikai modell egyetemessége. A rendszer lehetővé teszi nagyszámú vizsgázó tudásának teljes és minőségi tesztelését jelentős idő- és erőforrásráfordítás nélkül bármilyen méretű didaktikai egységen belül.
Az adaptív tesztelési eredmények megbízhatósága és pontossága. Olyan megközelítést alkalmaznak, amely teljesen kizárja az effektív tényezőt az alany tudásának egyéni modelljének elemzésekor.
Jelenleg rengeteg számítógépes tesztelési rendszert fejlesztettek ki és vezettek be. Az ilyen rendszerek az osztályozási paraméterekben jelentősen eltérnek. És most már bátran kijelenthetjük, hogy az adaptív számítógépes tesztelési rendszerek aktívan foglalják el a rést a szoftverpiacon a pedagógiai folyamatok szervezésében és támogatásában.
Bibliográfia
- Nikiforov, O. Yu. Feladatadatbázison alapuló számítógépes tesztelési környezet alkalmazása teszt formában a felsőoktatási intézmény minőségirányítási rendszerében. / O.Yu. Nikiforov, Yu.I. Nicoare // Továbbképzés minőségirányítása: 2. interregionális tudományos és gyakorlati konferencia cikkgyűjteménye // Felelős. szerkesztő E.Yu. Bahtenko; az Orosz Föderáció Oktatási és Tudományos Minisztériuma; Adósság. Oktatás Volog. vidék; Vologda. állapot ped. univ. – Vologda: VSPU, 2011. – 192 p. , Val vel. 72-79.
- Nikiforov, O. Yu. A MOODLE LMS tesztelési alrendszer elemzése // Információs technológiák a tudományban és az oktatásban: Nemzetközi Tudományos és Gyakorlati Internet Konferencia előadásai. – Bányák: YURGUES Kiadó, 2008. – 238 p.
- Nikiforov, O. Yu. Egy számítógépes tesztelőrendszer általános alkatrészmodellje / O. Yu. Nikiforov // Oktatás, tudomány, üzlet: jellemzők regionális fejlesztésés integráció: Összoroszországi tudományos és módszertani konferencia anyagai. – Cserepovec, – 2006. – 309-311.
- Nikiforov, O. Yu. A feladatok fő elemei teszt formában / O. Yu. Nikiforov // Oktatás, tudomány, üzlet: a regionális fejlődés és integráció jellemzői: Az Összoroszországi tudományos és módszertani konferencia anyagai. – Cserepovec, – 2006. – 315-316.
- Nikiforov O.Yu., Koksharova E.I. Szolgáltatások komplexuma a számítógépes tesztelési rendszerek osztályozására // Modern Tudományos kutatásés innováció. 2013. 6. sz
- Nikiforov, O. Yu. A számítógépes tesztelési rendszerek osztályozásának jelei / O. Yu. Nikiforov // Oktatás, tudomány, üzlet: a regionális fejlődés és integráció jellemzői: Az Összoroszországi tudományos és módszertani konferencia anyagai. – Cserepovec, – 2006. – 312-314.
Az orosz oktatás modernizálásának koncepciója szerint megjegyezhető, hogy a reform végrehajtásának fő erőfeszítései ma az információs technológia szerepének növelésére irányulnak. Különböző módon használják őket: az oktatási folyamat irányítására, a közvetlen tanításra, az asszimiláció ellenőrzésére, ellenőrzésére és praktikus alkalmazás a gyakornokok által megszerzett tudás. Erre a célra a közelmúltban egyre nagyobb mértékben alkalmazzák különböző szakaszaiban a képzés különféle tesztfelméréseket kapott. A tesztek alkalmazási köre igen széles, az aktuális téma kifejtését követő rövid felméréstől a záró-, érettségi- vagy felvételi vizsgákig. Ugyanakkor sok magasabb oktatási intézmények aktuális kérdés az információs technológia alkalmazása automatizált képzési és tudásellenőrző rendszerek fejlesztésében. Végtére is, az ilyen típusú rendszerek használata az oktatási folyamatban lehetővé teszi új adaptív tesztvezérlő algoritmusok alkalmazását, a számítógépek multimédiás képességeinek használatát tesztfeladatokban, csökkenti a papírmunka mennyiségét, felgyorsítja a felmérési eredmények kiszámításának folyamatát. , egyszerűsíti az adminisztrációt, és csökkenti a tesztelés megszervezésének és lebonyolításának költségeit. Összegzésképpen megállapítható, hogy a számítógépes tudásvezérlő rendszerek egyre népszerűbbek, ami objektivitásukkal, hozzáférhetőségükkel és költséghatékonyságukkal magyarázható.
A fentiek alapján döntés született egy szoftvercsomag, egy univerzális automatizált adaptív tesztelési rendszer (ASAT) kidolgozásáról, amely különféle típusú tesztek fejlesztésének és készítésének eszköze, valamint az eredmények tesztelésére és feldolgozására is szolgál. A kifejlesztett rendszerrel szemben támasztott fő követelmény az intelligencia volt, amelyet a tesztelési folyamat alkalmazkodóképességének megszervezésével értek el.
Az ACAT szoftvercsomag a következő képességeket biztosítja a tesztelési folyamat megszervezéséhez:
A tesztkészítési folyamat automatizálása, magas színvonalú tesztelési folyamat.
A rendszer nyitottsága és skálázhatósága.
A merev kapcsolat hiánya bármely témához.
Tesztek létrehozása és módosítása egyszerű.
Többfelhasználós munkavégzés lehetőségének biztosítása. Személyre szabott hozzáférés minden felhasználói kategória számára.
Védelem a tesztelt feladatokhoz való jogosulatlan hozzáférés ellen.
A tesztelési folyamat során minden szinten fejlesztett navigációs eszközöket. A tesztelési folyamat dinamikus irányítási eszközének rendelkezésre állása a tanár részéről.
A tesztanyag testreszabása (adaptációja) a tanuló (tanuló, hallgató, szakember stb.) egyéni jellemzőihez.
A következő kérdés adaptív kiválasztása a tanuló korábbi válaszainak helyességétől függően.
Az adatbázis feltöltése tesztfeladatokkal, lehetővé téve, hogy szöveges, grafikus és dinamikus tesztinformációkkal is dolgozhasson.
Lehetőség különböző feladatok létrehozására egy kérdéssorból.
Lehetőség a kurzus egyes részeinek tesztelésére és ennek eredményeként a teljes kurzusra záróvizsga lebonyolítására.
Nagyszámú gyakornok (hallgatók, tanulók, szakemberek) teljes körű és minőségi tudásellenőrzésének biztosítása különösebb időráfordítás és anyagi erőforrások nélkül az oktatási folyamat minden szakaszában.
A vizsgálati eredmények megbízhatósága, pontossága és objektivitása. A tanulók tudásértékelésének szubjektív megközelítésének megszüntetése.
A teszteredmények kiszámítása és a végső osztályzat generálása során előforduló hibák valószínűségének csökkentése.
A tanárok felmentése a teszteredmények feldolgozásának munkaigényes munkája alól.
A tesztelési eredmények azonnali összegyűjtése és elemzése bármikor, azzal a képességgel, hogy rendszeres jelentéseket és kimutatásokat készítsen különféle kérésekhez.
Az ASAT bevezetése a Szurgui Állami Egyetem hallgatóinak tanulási folyamatába és a Hanti-Manszi Autonóm Okrug - Ugra oktatási intézményeibe.
Az eredmények értékelésének módszere szerint a tesztek kétféleek: hagyományos és adaptív. Az adaptív teszt előnye a hagyományos tesztekkel szemben a hatékonysága. Egy adaptív teszt kevesebb kérdéssel tudja meghatározni a tesztfelvevő tudásszintjét. Ugyanannak az adaptív tesztnek a végrehajtásakor a magas képzettségű és az alacsony képzettségű tesztfelvevők teljesen más kérdéssorokat látnak majd: az elsők nagyobb számban nehéz kérdések, az utolsó pedig könnyű kérdések. A helyes válaszok aránya mindkettőnél azonos lehet, de mivel az első összetettebb kérdésekre válaszolt, több pontot kap. Egy másik jelentős hatás a megbízhatóság növekedése, mivel ebben az esetben ez megszűnik gyors tanulás feladatbankot egyszerűen „kattintva” a számítógépen a lehetőségekre (így csak a könnyű feladatokat lehet megtanulni, míg a nehezek és a középsők egy része tanulatlannak bizonyul).
Ebben a tesztelési rendszerben az alkalmazkodóképesség a könnyű, közepes és nehéz feladatok bemutatásának relatív arányának változásában fejeződik ki, a tesztelés során rögzített helyes válaszok számától függően. Meg kell jegyezni, hogy az átmenet a adaptív technika csak egy jelentős, empirikusan mért nehézségi fokú feladatbank felhalmozódása következtében lehetséges. Az alkalmazkodóképesség a „létra-algoritmus” elvével párosul - olyan feladatokat mutat be, amelyek szisztematikusan növelik a nehézségi szintet. Először a könnyű feladatokat mutatják be, majd a közepeseket, és ha a vizsgázó sikeres volt az előző szinteken, akkor a nehéz feladatokat. A tesztelő program minden válasz után megállapítja a tesztelő magasabb szintre történő úgynevezett „korai transzferének” érvényességét. magas szint nehézségek. Minden lépésnél felmérjük a helyes és helytelen válaszok száma közötti különbségek jelentőségét. Az 5%-os hibaszintnél kisebb értékek esetén (elvetve a helyes válaszok és hibák előfordulásának egyenlő valószínűségére vonatkozó hipotézist) a tesztfelvevő magasabb nehézségi szintre kerül. Ha egy adott szint feladatai kimerültek, és a vizsgázó nem lépett át a következő nehézségi szintre, akkor a tesztelési folyamat véget ér, és megtörténik a vizsgázó tudásszintjének meghatározása.
A rendszer három független modul formájában valósul meg:
tesztelő modul (vizsgázóknak szánt);
tesztek készítésére és szerkesztésére szolgáló modul (tanároknak);
statisztikai és eredményelemző modul (tanárnak szánt), amely egymástól függetlenül telepíthető különböző kliens gépekre;
A tesztek kezdeti adatainak és eredményeinek mentésére egy adatbázist használnak, amely a tesztfeladatokat, a teszt beállítási paramétereit és a tesztelési folyamatot, a felhasználói hitelesítéshez szükséges információkat, a teszteredményeket és az adatfeldolgozással kapcsolatos egyéb információkat tárolja.
A tesztek készítésére és szerkesztésére szolgáló modul azonosítja a regisztrált tanárokat vagy új tanárokat regisztrál, hozzáfér az adatbázishoz, amely az egyes tesztekhez tartozó tesztfeladatokat és -válaszokat, valamint annak paramétereit tárolja, és lehetővé teszi a tanár számára új teszt létrehozását, egy meglévő beállításainak módosítását. teszt, kérdések és válaszok szerkesztése.
Figyelembe kell venni, hogy egy tanár, aki bejelentkezési nevével és jelszavával bejelentkezett a rendszerbe, csak a saját tesztsorozatához fér hozzá, anélkül, hogy egy másik tanár tesztjeit megtekintheti vagy módosíthatja.
Az adatbázis segítségével a tesztelő modul azonosítja a regisztrált vagy új felhasználókat, kiválaszt egy tesztet, teszteli az alanyt egy kérdés megjelenítésével a képernyőn, majd választ kap, feldolgozza a kapott adatokat és a teszteredményeket beírja az adatbázisba további elemzés céljából, használja a tanár.
A vizsgázók csak bizonyos, az oktató által előre kijelölt tesztekhez férhetnek hozzá. Ebben az esetben egy adaptív tudáskontroll algoritmust használunk, amely a következő feladat kiválasztását határozza meg a tesztfelvevő korábbi kérdésekre adott válaszaitól függően. Ebben a rendszerben nincs lehetőség arra, hogy egy kérdést kihagyjunk és a tesztelés végén visszatérjünk hozzá, ez abból adódik, hogy attól függően, hogy a tesztfelvevő hogyan válaszol az aktuális kérdésre, a következő feltett kérdés választása dől el. A teszt befejezése után a teszt eredménye és egy rövid megjegyzés jelenik meg a vizsgázó számára. A teszt eredménye az a pontszám, amelyet a felhasználó a tanár által ehhez a teszthez megadott kritériumok alapján kap.
A statisztikát és a teszteredmények elemzését szolgáló modul lehetőséget ad a tanárnak, hogy megtekinthesse egy-egy tanuló vagy egy egész csoport teszteredményeit egy vagy több teszten, változó részletességgel. Ebben az esetben a jelentés megjeleníti az összes diák eredményét az összes, egy adott tanár kiválasztott tantárgyához kapcsolódó tesztre vonatkozóan.
Mivel a tesztelés az alkalmazkodóképesség elvén alapul, a kérdések, illetve egy teszten belüli számuk nem lesz azonos minden felhasználó számára. Ezért ez a modul nem csak a kimenet lehetőségét biztosítja Általános információ, hanem egy részletesebb jelentés is a tesztről, amely információkat tartalmaz arról, hogy a felhasználó milyen kérdéseket kapott és hogyan válaszolt rájuk.
A létrehozott rendszer megfelel modern követelményeknek az ilyen típusú rendszer osztályára vonatkozó követelményeket, mind a pedagógiai tesztelés, mind az információs technológia területén.
Bibliográfiai link
Bushmeleva K.I. AUTOMATIZÁLT ADAPTÍV VIZSGÁLATI RENDSZER // Alapkutatás. – 2007. – 2. sz. – P. 48-50;URL: http://fundamental-research.ru/ru/article/view?id=2517 (hozzáférés dátuma: 2019.09.18.). Figyelmébe ajánljuk a Természettudományi Akadémia kiadója által kiadott folyóiratokat
Az adaptív tesztkontroll alatt a tanulási eredmények tudományosan megalapozott ellenőrzésének és értékelésének számítógépes rendszerét értjük, amely az adaptív tesztek végrehajtásának eredményeit generáló, bemutató és értékelő eljárások optimalizálása miatt rendkívül hatékony. Az ellenőrzési és értékelési eljárások hatékonysága nő, ha többlépcsős stratégiát alkalmazunk a teljes kontextusfüggő algoritmusokon alapuló feladatok kiválasztására és bemutatására, amelyben a következő lépést csak az előző lépés eredményeinek kiértékelése után hajtjuk végre. Miután az alany elvégezte a következő feladatot, minden alkalommal döntést kell hozni a következő feladat nehézségi fokának kiválasztásáról, attól függően, hogy az előző válasz helyes vagy helytelen volt. A feladatok kiválasztásának és bemutatásának algoritmusa a visszacsatolás elvén alapul, amikor az alany helyes válasza esetén a következő feladatot nehezebbnek választják, és a hibás válasz egy későbbi könnyebb feladat bemutatását vonja maga után, mint amelyre az alanyok helytelen választ kaptak. További kérdéseket is fel lehet tenni olyan témákban, amelyeket a hallgató nem nagyon ismer, annak érdekében, hogy ezeken a területeken pontosabban meg lehessen határozni a tudásszintet. Így elmondhatjuk, hogy az adaptív modell egy vizsgázó tanárra emlékeztet - ha a tanuló magabiztosan és helyesen válaszol a feltett kérdésekre, a tanár gyorsan pozitív osztályzatot ad neki. Ha a diák „lebegni” kezd, akkor a tanár további vagy irányadó kérdéseket tesz fel neki, ugyanolyan bonyolultságú vagy ugyanarról a témáról. És végül, ha a diák már az elején rosszul válaszol, a tanár is elég gyorsan ad osztályzatot, de negatívat.
Előnyök:
Lehetővé teszi a tanulók tudásának rugalmasabb és pontosabb mérését;
Lehetővé teszi a tudás mérését kevesebb feladattal, mint a klasszikus modellben;
Azonosítja azokat a témákat, amelyeket a tanuló rosszul ismer, és lehetővé teszi számára, hogy számos további kérdést tegyen fel velük kapcsolatban.
Hibák:
Nem tudni előre, hogy hány kérdést kell feltenni a tanulónak, hogy meghatározza tudásszintjét. Ha a tesztelési rendszerben szereplő kérdések nem elegendőek, megszakíthatja a tesztelést, és a hallgató által megválaszolt kérdések száma alapján értékelheti az eredményt;
Csak számítógépen használható.
Klasszikus tudásfelmérő skálák és Item Response Theory.
Klasszikus tesztelési elmélet ( Klasszikus tesztelmélet - CTT ) eredetileg a diagnosztikai eljárások értelmezésére készült. Ezt az elméletet tisztán alkalmazott problémákra hozták létre, ezért az elmélet alapjaiban használt feltevések egy részét tisztázni kell, különösen azért, mert ezeket az alapokat a szakirodalom szinte nem tárgyalja.
A klasszikus tesztelési elmélet kifejezetten feltételezi:
1. Egydimenziós, i.e. A vizsgálati eljárás csak egy minőséget, felkészültséget vagy képességet mér.
2. A reprezentativitás a CTT keretein belül egy adott értékelés valószínűségének függetlenségeként értendő, hogy az általános sokaság melyik alcsoportja fogja elvégezni a tesztet.
3. A feladatok önállósága, i.e. a feladatok függetlenek egymástól.
4. A tesztalanyok válaszainak függetlensége.
Mindkét említett függetlenséget legalább statisztikai értelemben értjük.
Mivel a diagnosztikai eljárások a legtöbb esetben tesztek formájában, a legtöbb tesztben zárt, vagy ritkábban nyitott kérdések formájában zajlottak, az egyes válaszok eredményét valamilyen skálán pontokban mérhetőnek tételeztük fel.
Az explicit feltevéseken kívül ez az elmélet tartalmaz néhány implicit feltevést is. Különösen hallgatólagosan feltételezik:
- mérhetőség minden lehetséges válasz, pl. hatékony eljárás megléte bármely feltett kérdésre való válasz megszerzésére,
- teljesség válaszok, azaz. minden feltett kérdésre választ kap, amiből az következik, hogy a válaszadás megtagadását nem vesszük figyelembe,
- egyenértékűség minden kérdés, és ezért az összes kapott válasz egyenlő súlya,
- szórások egyenlősége párhuzamos válaszlapok használatakor,
- normális eloszlás válaszol.
A műszaki mérésekhez hasonlóan implicit módon feltételezzük, hogy bármely mérési eredmény a valós értékből és a mérési hibából áll, és a mérési hibákat additívnak tekintjük, ami szükséges a hibaösszegekről egy integrálra történő helyes átmenethez. hiba, és az integrál hiba is normális eloszlású.
Azt, hogy ezek a feltételezések mennyire helytállóak, általában nem tárgyalják. Ha valami, a CTT-vel kapcsolatos legnagyobb kérdések a valódi feladatfüggetlenség biztosításához kapcsolódnak. Az értékelési skálák kiválasztásának kérdését szintén nem tárgyaljuk, a kezdeti feltevés szerint a „nyers pontszámok” már megvannak.
Egy finomabb kérdés a „hiba” kategória metrológiai jelentésével kapcsolatos. A műszaki méréseknél hallgatólagosan feltételezzük, hogy a hiba és az általa generált hiba a mérési eljárás sajátossága, ezért a hiba elvileg becsülhető és figyelembe vehető a hitelesítési és kalibrálási eredmények alapján. . Az ergatikus elemek mérése során egy másik hibaforrás jelenik meg - a mért instabilitása, amely különféle tényezők hatására jön létre, amelyek közül a legfontosabbak a tanulás, a felejtés, a fáradtság és a funkcionális állapot dinamikája. Ezeknek a tényezőknek a korrekcióit a metrológia nem tárgyalja.
A végső becslés elkészítéséhez különféle számítási eljárásokat alkalmaznak. Leggyakrabban az átlagpontszámot a szokásos számtani átlagképlet segítségével számítják ki, ahol a végső pontszám én-edik alany, és ennek a mutatónak az átlagától vagy változataitól való eltérés négyzete - szórás vagy diszperzió. Az eredmények összehasonlításához a feladatok és a tantárgyak közötti korrelációs együtthatót használjuk.
Lehetőségként néha az űrlap súlyozott átlagpontszámát is használják, ahol a megfelelő súlyozási együtthatók.
A fent felsorolt feltevések közül a legnehezebben bizonyítható a válaszok egyenértékűsége, mivel ehhez a megfelelő válaszok nehézségeinek szubjektív egyenlőségének bizonyítása szükséges, és egyben az összes feltett kérdés egyenlő fontosságának bizonyítása. . Az említett statisztikai mutatók kiszámíthatóságának feltételezése érdemi bizonyítást igényel a pontskála homeomorf beágyazásának helyességéről a valós számok skálájába, amelyben az ilyen számításokat ténylegesen végezzük. Más szóval, mind a kritérium, mind a konstrukció érvényességével kapcsolatos kérdések általában nyitottak maradnak.
A fent említett standard statisztikai mutatók mellett (amelyek matematikai helyességének kérdése általában nem esik szóba) az alanyok esetében az egyértelmű pragmatikus, de kétes matematikai jelentésű mérési eljárások pszichometriai tulajdonságait vizsgálják, pl.
Egy feladat könnyűségi tényezője (vagy hasonló nehézségi együtthatója), ahol a feladatra kapott átlagpontszám, ugyanazon feladatra adható maximális pontszám, annak ellenére, hogy bármely feladat minimális pontszámát nullának tételezzük fel. alapértelmezés szerint,
A feladat diszkriminációs együttható, azaz a feladat eredménye és a végeredmény közötti korrelációs együttható, vagy ami informatívabb lehetőségnek tekinthető, az a feladat eredménye és a végeredmény közötti korrelációs együttható, anélkül, hogy ezt a feladatot figyelembe vennénk,
és néhány más együttható, amelyek értelmezése ebben a tudományban eltér az általánosan elfogadotttól.
Különösen, megbízhatóság itt a szokásos felfogástól eltérően nem egy rendszer vagy objektum minőségének, hanem egy mérésnek tekintjük, és nem a megfelelő működés idejével vagy ennek bármely változatával, például idővel értékeljük. meghibásodások között, hanem összehasonlítható mutatók megszerzésének lehetőségeként, korrelációs együtthatóval értékelve. Ebből az értelmezésből azt kapjuk állandó megbízhatóság, azaz a két feladat végrehajtásának eredménye közötti korrelációs együttható, amelyek közötti időtávolság elegendő ahhoz, hogy ezeket a feladatokat szubjektíven függetlennek tekintsük, párhuzamos megbízhatóság, azaz. feladatváltozatok eredményei közötti korrelációs együttható, az alkatrészek megbízhatósága, i.e. a teljes mérési eljárás és annak bármely része közötti korrelációs együttható és egyéb mutatók. Más szavakkal, a konzisztens megbízhatóságot ebben a tudományban úgy hívják, hogy a professzionális méréselméletben a teszt-újrateszt érvényességének kvantitatív mérőszáma, a párhuzamos megbízhatóság és a formai megbízhatóság a teszt szubteszt érvényességének mértéke, és általában a terminológiában zavar van, ami az érvényesség és a megbízhatóság zavarához vezet.
Egy másik változat szerint a megbízhatósági együtthatót a következőképpen definiálják: ahol a mérési hibák szórása és a szerzett pontok szórása, azaz a megbízhatósági együttható definíciójában az idő egyáltalán nem szerepel.
Az ilyen számítások matematikai szempontból kétségessége abból adódik, hogy a kiindulási adatokat kezdetben egy pontskálán kaptuk, amelyen néha a sorrend, sőt a lineáris sorrend is meg van adva, de az aritmetikai műveletek nincsenek definiálva. . Ezért az átlagok, súlyozott átlagok, szórások és korrelációk összeadása és utólagos kiszámítása egy pontskálán nem definiált. Egy másik, pragmatikai szempontból érthető, de egyértelműen elégtelen elméleti indoklású feltevés a válaszok normális eloszlására, és így a „nyers pontszámok” valós számskálán való eloszlására vonatkozó állításokat jelenti. Az azonos pontszámok lognormális eloszlásának feltételezése gyakran hihetőbbnek tűnik, de általában nem is igazolódik. Ezek a feltevések lehetővé teszik az eredmények statisztikai feldolgozására jól ismert módszerek alkalmazását, de az e feltételezés utáni összes későbbi számítás matematikai helyességét nem tárgyaljuk.
A szakirodalom széles körben tárgyalja a tudásskálák (metrikák) felépítésének hagyományos megközelítésének számos problémáját, amelyek bizonyos speciálisan kiválasztott feladatsorok elvégzéséhez szükségesek.
Mindenekelőtt a teszt-teszt és a tesztközi érvényesség bizonyítása szinte lehetetlen, ezért nyitva marad az összehasonlítás, és még inkább a különböző módszerekkel végzett mérési eredmények általános elszámolásának kérdése.
Többször feljegyezték már az „élhatásokat”, vagyis a válaszeloszlás mediánjához közelebb eső eredmények relatív stabilitását és az eloszlás szélein lévő instabil eredményeket, amit általában az idegen tényezők növekvő szerepével magyaráznak mind az „alsó” ” és a disztribúció „felső” részei. E hatások leküzdésére általában empirikus alapú ajánlást javasolnak az eloszlás bizonyos „megbízhatósági kvantilisei” beállítására, általában azt javasolják, hogy fogadjuk el, vagy ha a válasz alá vagy fölé esik, korrigáljuk az instabilitást, főként a kapott értéket túlbecsüljük. becslések empirikusan kiválasztott korrekciós képletekkel.
Zárt kérdések esetén véletlenszerű tippelési helyzetek is lehetségesek, az adatok javításához ebben az esetben javasoljuk az űrlap javítását, ahol a javítás utáni eredmény, az eredmény (pontban vagy más skálán) a javítás előtti kérdésre adott válasz a kérdésre adott lehetséges válaszok száma, w- az elvégzetlen feladatok száma egy méréssorozatban. Ez a képlet empirikusan igazolható, különösen az a kérdés, hogy célszerű-e ebben a képletben figyelembe venni azokat a teljesítetlen feladatokat, amelyeknél a megfelelő értékről van szó, ami csökkenti az értéket, és viták folynak az ilyen módosítások tartalmi értelméről.
Általánosságban elmondható, hogy a tudásminőség mérőszámait a klasszikus megközelítésben a módszerek statisztikai kalibrálása indokolja a megfelelő sokaságra. A teremtés óta IQ a tudásmérések metrológiai megalapozása a válaszadók megfelelő kontingensére számított ponteloszlás alapján történik. Például az átlagértékek vannak feltüntetve IQéletkor, társadalmi vagy szakmai csoportok szerint. A különbségtől azonban IQ Nem világos, hogy a tudás szerkezetében milyen alapvető különbségek különböztetik meg ezeket a csoportokat.
Forrás:annotáció
A számítógéppel segített tanulás (CBT) nagy lehetőségeket rejt magában, ha megfelelően használják a tanulás javítására. Ez a minőség azonban javítható számítógépes tesztelés (CT) és pontosabban a számítógépes adaptív tesztelés (CAT) használatával. E munka céljaira a szerző ismerteti a számítógépes adaptív tesztelés mechanizmusát és előnyeit, valamint azt, hogy miként javíthatja a tanulási folyamatot a tudomány tárgykörében. A pedagógust arra biztatjuk, hogy vegye figyelembe néhány korlátot és kihívást a megvalósítás során, és szó lesz a természettudományos oktatásról is. KULCSSZAVAK Számítógépes adaptív tesztelés, CAT, számítógépes tesztelés, számítógépes képzés, természettudományos oktatás, értékelés, visszajelzés.
BEVEZETÉS
A számítógép-alapú tanulás rendkívül nagy lehetőségeket rejt magában a tanulás javítására számos területen és tudományterületen, beleértve a természettudományok területét is. A számítógépes képzést azonban szorosan és folyamatosan figyelemmel kell kísérni annak hatékonysága érdekében. Ez különösen igaz, mivel néhány korábbi kutatás kimutatta, hogy a számítógép-használat negatívan korrelál a matematikai és természettudományi eredményekkel (Papanastasiou és Ferdig, 2003). Bár nem világos, hogy ezek milyen körülmények között Negatív következmények fejlődnek, és ha van ok-okozati kapcsolat e változók között, miért létezik még mindig. Ezért ennek a kapcsolatnak emlékeztetnie kell a pedagógust arra, hogy a számítógép használata nem feltétlenül "csodálat", és nem szabad felelőtlenül használni, és nem szabad lekötnie a nehezen kezelhető tanulók figyelmét. A számítógép-használat és az eredmények közötti negatív kapcsolatnak emlékeztetnie kell az oktatókat arra is, hogy a természettudományokban jelentős szükség van a folyamatos konstruktív és szummatív értékelésre. A megfelelő értékelés segítségével a tanulás során felmerülő problémák azonosíthatók és korai felismerés esetén esetleg korrigálhatók. Az értékelést azonban okosan kell alkalmazni úgy, hogy az kiegészítse a tanulási folyamatot. Mivel a konferencia középpontjában a számítógépes tanulás áll, ez a cikk a számítógépes értékeléssel fog foglalkozni. Ennek a cikknek az a célja, hogy az egyszerű számítógépes képzésen túlmenően leírja a számítógépes adaptív tesztelést, és megvitassa annak következményeit, előnyeit, és azt, hogy hogyan tudja hatékonyan kiegészíteni a számítógépes képzést ezen a tudományterületen.
Leírás
A számítógéppel segített tesztelés (CT) bármilyen típusú értékelésként definiálható, amelyet számítógépen keresztül hajtanak végre. A számítógépes tesztelés azonban eltarthat különféle formák, attól függően, hogy mennyire személyre szabott a teszt (College Board, 2000). Például egyes számítógépes tesztek, amelyeket rögzített számítógépes teszteknek is neveznek, tisztán lineárisak (Parshall, Spray, Kalohn és Davey, 2002). Ezek azok a tesztek, amelyek leginkább a papír- és ceruza-teszthez hasonlítanak, mivel fix alakúak, fix hosszúságúak, és a tesztelemek meghatározott sorrendben vannak előre beállítva. Ellentétben a rögzített számítógépes tesztekkel, a számítógépes adaptív tesztek (CAT) olyan számítógépes tesztek, amelyek maximális alkalmazkodóképességgel rendelkeznek, mivel minden tanuló számára testreszabhatók az általános nehézség és a kérdések vizsgázónak való bemutatásának sorrendje alapján. Tehát a számítógépes adaptív tesztek (CAT) olyan számítógépes tesztek, amelyeket kifejezetten az egyes tesztfelvevők számára hoznak létre és adaptálnak a tesztelő képességeinek felmérése és az előző lépésekben kapott válaszok alapján.
A számítógépes adaptív tesztek előnyei
A számítógépes adaptív tesztelés fő előnyei azzal a ténnyel kapcsolatosak, hogy hatékonyak az idő és a felhasznált erőforrások tekintetében. Ezekről az előnyökről lesz szó a következő részben a tesztfelvevők, a tanuló tudásszintjét megállapítani kívánó tanár, illetve a tesztkészítő szemszögéből is.
Hatékonyság
Az adaptív tesztek pontosabban és olcsóbban teszik lehetővé az alany képességeinek felmérését, mint a papíralapú tesztek használata. A tipikus papíralapú teszteket tömeges tesztelésre hozzuk létre, így a tesztet változó képességű tanulók nagy csoportjának adják ki. Ennek érdekében ebben a tesztben a legtöbb kérdés közepes nehézségi fokú (mivel a legtöbb tanuló átlagos tanulmányi teljesítménnyel rendelkezik), így az ilyen típusú teszttartalom problémákat okoz a jól és gyengén teljesítő tanulók számára. Az alacsony tudású tesztfelvevő képes megválaszolni az első néhány viszonylag egyszerű kérdést. A közepes és magas nehézségi fokú kérdésekre pedig nem lesz könnyű válaszolni a tanulónak. Következésképpen a tesztfelvevő végül kitalálja a választ ezekre a kérdésekre, vagy egyszerűen üresen hagyhatja őket. Ebben az esetben nehéz igazán felmérni tudását és képességeit, mivel minden következtetést csak az első néhány kérdésre adott válaszokon kell alapulnia, amelyeket a hallgató megérthetett. Egy másik, több konkrét példa Ezt a helyzetet az alábbiakban mutatjuk be. A tanár biológia tesztet szeretne végezni a „máj” kérdés témában alacsony szint megköveteli a máj elhelyezkedésének azonosítását egy személyről készült képeken, a magas szintű kérdésekhez pedig szükséges, hogy a tanuló képes legyen a májbetegséget képek alapján diagnosztizálni. Ebben az esetben, ha egy diák még a májat sem tudja megállapítani az emberi testről készült képen, nincs miért feltenni neki egy nehezebb kérdést. Ha egy mély biológiát ismerő diák szemszögéből nézzük az ilyen teszteket, a helyzet valamivel jobb, bár még mindig nem tökéletes. A legtöbb kérdés túl könnyű lesz ennek a személynek. Az adaptív tesztek lehetővé teszik, hogy hatékonyan válasszon olyan kérdéseket, amelyeket kifejezetten az egyes tesztfelvevők egy bizonyos szintű tudására terveztek. Ha minden kérdés egyértelműen az egyes tanulók képességeire irányul, a tanár megbízhatóbb és érvényesebb következtetéseket tud levonni a tanuló tényleges tudásáról.
Visszacsatolás
A számítógépes tesztelés általánosságban, valamint a számítógéphez alkalmazkodó tesztek másik előnye, hogy képesek közvetlenül és azonnal befolyásolni a tanulók és a tanárok közötti visszajelzést (Wise & Plake, 1990). Egy tipikus papíralapú tesztnél mindig van időkésés a tanár és a vizsgázó között. Értékelés elkészítése nélkül a tanárok nem tudják eldönteni, hogy a számítógépes oktatás valóban a tanuló tanulását segíti-e vagy sem. Ez különösen azért fontos, mert megfelelő értékelés nélkül egyes hallgatók hátrányba kerülhetnek a számítógépes képzés miatt. Továbbá átfogó értékelés, ez a fajta értékelés megmutatja, hogy az egyes tanulók hogyan sajátították el az anyagot összességében; lehetőség van arra is, hogy az adaptív tesztelésben elért teljesítménye alapján listázzanak azokat a területeket és tantárgyakat, amelyekben minden tanulónak kérdései voltak. A tanárnak azonban felmerülhet ilyen kérdése, folyamatos teszteléssel előfordulhat, hogy egyes tanulók emlékeznek a tesztkérdésekre, és tájékoztatják a többi tanulót azokról. Ha azonban egy adaptív teszt viszonylag nagy mennyiségű kérdést tartalmaz, akkor ez a probléma nem merül fel, különösen azért, mert a különböző tanulóknak egyéni képességszintjeik alapján különböző tételeket kell adni.
Idő
Tesztfejlesztői szempontból egy adaptív teszt elkészítése időigényes, de tanári szempontból hatékonyabb. A tanulóknak az adaptív tesztelés során kevesebb kérdésre kell válaszolniuk, mint a normál tesztelés során. Ezenkívül a rendszeres tesztelést általában az egész csoport végzi egy bizonyos ideig, ami nem biztos, hogy megfelel néhány tanulónak. A tanárnak és az egész csoportnak meg kell várnia, amíg az összes diák kitölti a tesztet, mielőtt egy másik tevékenységre léphetne. A számítógépes adaptív teszteléssel a hallgatók bármikor vizsgázhatnak, amikor készen állnak, csak az a feltétel, hogy a számítógép rendelkezésre álljon, és nem kell megvárniuk, amíg az egész csoport készen áll a tesztre, vagy amíg az egész csoport teljesíti. . A tanár szemszögéből az adaptív tesztelés időt takarít meg, és a tanárnak többé nem kell aggódnia, hogy teszteket készítsen a csoport számára, amíg a CAT képes lefedni a lefedett anyagot. Emellett a tanár időt takarít meg a dolgozatok ellenőrzésével, hiszen a tesztet számítógép végzi.
Egyéb előnyök
A számítógépes adaptív tesztelésnek további előnyei is vannak. A számítógépes adaptív tesztelés magas szintű biztonsággal rendelkezik, mivel a kérdéslistát már nem lehet ellopni, és a szomszédok csalása sem kifizetődő, mivel a tesztkérdések többsége mindenki számára egyéni. Ezenkívül a CAT segítségével más típusú adatok is gyűjthetők, például az egyes kérdések megválaszolásához szükséges idő vagy a teszt elvégzése során a tanulókon végrehajtott változtatások száma.
KÖVETKEZTETÉS
Modern kutatás A tesztelés és értékelés területén kimutatták, hogy a számítógépes adaptív tesztek lehetőségei megnőttek. A számítógépes adaptív tesztelés előnyei és lehetőségei még továbblépést tesznek lehetővé. Ez jól látható a nagyszabású tesztelések (pl. GRE, TOEFL, ASVAB) számában, amelyek adaptívvá váltak vagy válnak (Papanastasiou, 2001). Egy ilyen lépést azonban mindig bölcsen kell megtenni, hogy egy ilyen értékelési eljárás jól beépüljön a tanulási folyamatba, hogy biztosítsa annak maximális hatékonyságát.
Linkek
1. Bennett, R. E. (1999). Új technológia alkalmazása az értékelés javítására. RR99-6. Princeton, NJ: Oktatási tesztelési szolgáltatás. 2. Lord, F. M. (1980). Az itemválasz elmélet alkalmazása gyakorlati tesztelési problémákra. Hillsdale, NJ: Lawrence Erlbaum munkatársai. 3. Meijer, R. R. és Nerling, M. L. (1999). Számítógépes adaptív tesztelés: Áttekintés és bevezetés. Alkalmazott pszichológiai mérés, 23(3), 187-194. 4. O'Neill, K. (1995). Fogyatékkal élő vizsgázók teljesítménye számítógépes tanulmányi készségteszteken. A tanulmány az Amerikai Oktatáskutató Egyesületben, San Francisco, 1995. április. 5. Papanastasiou, E. C. (2001). „Átrendezési eljárás” adaptív tesztek adminisztrálására, amikor a felülvizsgálati lehetőségek megengedettek. (Doktori disszertáció, Michigan State University, 2001). 6. Papanastasiou, E. (2002a). Egy „átrendezési eljárás” az adaptív tesztek pontozására felülvizsgálati lehetőségekkel. A New Orleans-i, Los Angeles-i Nemzeti Oktatási Mérésügyi Tanácsban bemutatott tanulmány. 7. Papanastasiou, E. (2002b). Tényezők, amelyek megkülönböztetik a matematikus diákokat Cipruson, Hong Kongban és az Egyesült Államokban. Oktatáskutatás és -értékelés, 8(1), 129-146. 8. Papanastasiou, E. C. & Ferdig, R. E. (2003, január). Számítógép-használat és matematikai műveltség. A meglévő és potenciális kapcsolatok elemzése. Előadás a harmadik mediterrán matematikaoktatási konferencián, Athén, Görögország, 2003. január 3-5. 9. Parshall, C. G., Spray, J. A., Kalohn, J. C. & Davey, T. (2002). Gyakorlati szempontok a számítógépes tesztelésben. NY: Springer. 10. Parshall, C. G., Stewart, R. és Ritter, J. (1996). Újítások: Grafika, hang és alternatív válaszmódok. Előadás a National Council of Measurement in Education-en, 1996. április 9-11., New York. 11. A Főiskola Tanácsa. (2000, április). A számítógépes tesztelés áttekintése. RN-09. 12. Wainer, H. (2000). MACSKÁK: Hol és bármikor. Psicologica, 21(1-2), 121-133. 13. Wise, S. L. & Plake, B. S. (1990). Számítógépes tesztelés a felsőoktatásban. Mérés és értékelés a tanácsadásban és fejlesztésben, 23, 3-10.
Elena C. Papanastasiou, Ph.D. A Kansasi Egyetem és a Ciprusi Egyetem Oktatási Tanszéke P.O. Box 20537 1678 Nicosia Ciprus
Az idegen nyelvek tanításának modern módszereinek egyik aktívan fejlődő és ígéretes területe a számítógépes technológiák használata a beszédkészségek és képességek fejlettségi szintjének szabályozására.
A számítógépes tesztelés lehetővé teszi a szöveges, grafikus, hang- és videó információk beépítését a tesztfeladatokba, valamint az ellenőrző mérések végzésének teljes automatizálását.
A számítógépes tesztelés lehetővé teszi:
gyorsan feldolgozza a bevitt információkat;
működését biztosítani Visszacsatolás, amely lehetővé teszi, hogy a tesztalany folyamatosan és azonnal megkapja a megerősítést a válasz helyességéért, a tanár pedig a tesztalany cselekedeteinek lépésenkénti vagy operatív ellenőrzését;
növelje a tesztfelvevő motivációját, mivel a számítógépes programmal végzett munka során a játékhelyzethez hasonló szokatlanság eleme jelenik meg, megjelenik a számítógéppel való versenyszellem;
jelentős időt és költségeket takaríthat meg a tesztelés megszervezésével és lebonyolításával kapcsolatban.
Tehát az első feladat, amit a számítógép hatékonyan meg tud oldani, a tesztfeladatok tárolása és azokból tesztek létrehozása, vagyis az elsődleges, eredeti szerzői anyag feldolgozása, a szükséges pontosítások, javítások, kiegészítések elvégzése; információkat tárol, meghatározott szempontok szerint választ ki egy elektronikus adatbankból feladatokat, és elkészíti a tesztek szükséges elrendezését.
A számítógép által végrehajtott második feladat a tesztfelvevők regisztrálása és felkészítése a feladatok elvégzésére. Például a regisztráció, amely lehet teszt előtti vagy közvetlenül a tesztelés előtt, magában foglalja a regisztrációs kártya kitöltését a számítógép képernyőjén. Miután megkapta a szükséges információkat, a rendszer megadja a tesztet egy azonosító számot.
A számítógép fel tudja készíteni a tesztfelvevőt a teszt elvégzésére – utasításokat ad. A számítógépes program információkat tartalmaz a teszttel való munkavégzés módszertanáról: ajánlásokat a teszt végrehajtásának technológiájára vonatkozóan, adatokat a tesztelési időre, az értékelési eljárásra stb. , kerülje el a véletlenszerű (nem a vizsgázó nyelvi és beszédkompetenciájához kapcsolódó) hibákat, alakítsa ki a szükséges átmeneti sztereotípiákat.
A következő lépés egy tesztelési munkamenet számítógép segítségével. Ennek a szakasznak a fő problémája a munka időtartama. Ezért fontos, hogy a tesztelő számítógépes programba beépítsék a tesztalany számára rendelkezésre álló, eltöltött és hátralévő idő megjelenítését, elszámolását, ellenőrzését.
A munka megkezdéséhez a vizsgázónak meg kell adnia azonosító számát, azaz a regisztráció során kapott számot. Ezt követően egy tesztet kap, amely feladatokkal és azok teljesítéséhez szükséges utasításokkal rendelkezik.
A vizsga lebonyolítása lehet önkéntes (a vizsgázó kérésére és az oktató engedélyével, a feladatok elvégzésekor) vagy kényszerű (a határidő lejártakor).
Ha a teszt készítői-összeállítói a tesztfeladatokat nem kifejezetten nehézségi fok szerint rendezték, nem osztották fel a tesztet teljesítménycélok és beszédtevékenység-típusok tekintetében autonóm részteszt-részekre, akkor megengedett a teszt elvégzése. bármilyen sorrendben. Ellenkező esetben bizonyos feladatok kihagyását, például azokat, amelyek nehéznek tűntek, és azokhoz való visszatérést tiltja a számítógépes program.
A tesztfeladatok elvégzése után kezdődik a válaszok feldolgozásának és a pontozásnak a szakasza. V. I. Nardyuzhev, I. V. Nardyuzhev osztályozása szerint a feldolgozás lehet:
helyi, a vizsgálati helyszínen végzett;
távoli, a tesztelési munkamenetek helyszínén kívül;
formális, ha lehetséges a kulcsokkal való egyszerű összehasonlítás;
szakértő, ha az összehasonlítás nem lehetséges, és szakértők, szakemberek bevonása szükséges (például egy részletes szóbeli vagy írásbeli válasz értékeléséhez);
működőképes, lehetővé téve az eredmények azonnali bemutatását a tesztelés után;
elhalasztják a pontszámítás bonyolult algoritmusa vagy az értékelő vagy szakértő véleményének igénye miatt.
A számítógép használata lehetővé teszi az információk statisztikai elemzését, azaz egyrészt a teszt résztvevőiről történő információszolgáltatást, másrészt - ami a nyelvi ismeretterjesztés jelenlegi fejlődési szakaszában a legfontosabb - a minőségi adatok gyűjtését. vizsgálati anyagokból.
Az első esetben az elemzési algoritmus a következőket feltételezi:
)a statisztikai elemzés tárgyának kiválasztása (részteszt);
) a tesztelésben résztvevők számának meghatározása egy adott szinten;
)a vizsgázók rangsorolása a szerzett pontok száma szerint;
) az egyes tesztfeladatokra adott helyes válaszok százalékos arányának meghatározása;
)grafikonok készítése digitális adatok felhasználásával;
)szükség esetén különböző objektumok vizsgálati eredményeinek összehasonlítása.
A második esetben a statisztikai elemzést a következő módon hajtják végre:
) a vizsgálati eredmények minimális, átlagos, maximális értékének meghatározása;
)a feladat statisztikai paramétereinek megállapítása: nehézségi szint, megkülönböztető képesség (a feladat azon képessége, hogy megkülönböztesse az erős tanulókat a gyengéktől);
)zavaró személyek munkájának elemzése, beleértve a válaszok mindenki általi megválasztásának gyakoriságát, valamint a gyenge és erős válaszokat;
) a feladatok függetlenségének meghatározása a tesztben.
A számítógépes tesztelés speciálisan kifejlesztett szoftverrel lehetséges, amely megvalósítja a szerzők által javasolt információs és pedagógiai tesztelési modellt.
A számítógépes szoftverek jelentősen befolyásolják mind a tesztfeladatok tartalmát (például a hanghasználathoz hangkártyával kell felszerelni a számítógépet), mind az információs és pedagógiai modell megvalósításának módját (például a számítógépek internetre csatlakoztatása lehetővé teszi a rendszerezést). és valós időben végezzen tesztelést).
Számítógépes programok teszteléshez idegen nyelv programozási módtól függően osztályozható. A program lehet lineáris: ebben az esetben az egyetlen dolog, amit megadunk lehetséges irány dolgozzon a teszttel, függetlenül attól, hogy a tanulók egy-egy kérdésre, feladatra milyen minőségű választ adnak. Például a tesztfelvevőnek választania kell a válaszlehetőségek egyikét a szövegértés teszteléséhez szükséges feladatok elvégzésekor:
A lineáris programot egy beállítási szakasz bonyolíthatja (például a nyelvtani készségek tesztelésére szolgáló feladatok elvégzésekor). Ebben az esetben, ha a válasz helytelen, a számítógép visszaállítja a tesztet az eredeti feladathoz, utasításhoz vagy szabályhoz.
Az elágazó program magyarázatokat, további, irányadó kérdéseket és útmutatásokat ad a kezdeti feladatok elvégzéséhez és a szekvenciális mozgáshoz vagy a kereten keresztüli mozgáshoz engedély megszerzéséhez.
A lineáris és elágazó szakaszokat kombináló programok vegyes vagy kombinált kategóriába sorolhatók. Nagyobb rugalmasságot biztosítanak az irányításban, és a munkát a tanulók egyéni képességeihez igazítják. Ugyanakkor az idegen nyelvű számítógépes tesztelésnek megvannak a maga sajátosságai és megvannak a maga követelményei az ellenőrzött anyag bemutatására és a feladatok elvégzésére. Az egyik fő feladat az információk bemutatására szolgáló összes csatorna maximális kihasználása, a multimédiás technológiák (grafika, animációs klipek, videoképek), valamint a dokumentumokra és forrásokra mutató különféle hivatkozások (referenciakönyvek, lexikai minimumok, intonációs kontúrok stb.) felhasználása. .). A számítógépes didaktikai vizualizáció, a kommunikációs helyzetek szimulálása, a feladatok elvégzésének és a válaszjavítás megszervezése viszont növeli a számítógépes programok monitorozásának produktivitását és a vizsgázók motivációját az idegen nyelv elsajátítására.
Számítógépes tesztelési lehetőségek
Ma a világon vannak különféle szervezetek, nem csak a problémák fejlesztésével foglalkozik, hanem számítógépes tesztelési rendszerekkel is. Köztük az Oktatási Tesztelési Szolgálat (ETS) – az Oktatási Tesztelési Szolgálat ( #"justify">), amely 1970 óta foglalkozik számítógép-tesztelési kérdésekkel és ajánlatokkal Ebben a pillanatban a TOEFL számítógépes verziói ( #"justify">) - Angol mint idegen nyelv teszt. Ezt a tesztet készítette angol nyelv idegen nyelvként az USA-ban és Kanadában használják a főiskolákra.
Franciaországban a Nemzeti Távoktatási Központ (Centre national denseignement à distance) a teszt számítógépes változatát kínálja angol nyelven idegen nyelvként: Test FLE - Test de Français langue étrangère et seconde - niveau général (élémentaire, intermédiaire, avancé) : compréhension écrite, grammaire, vocabulaire , compréhension orale ( #"igazolja">). A teszt lehetővé teszi, hogy meghatározza az angol, mint idegen nyelv nyelvtudásának szintjét. A "LEcole des Trois Ponts" angol nyelviskola interaktív teszteket is kínál az általános angol nyelvtudáshoz ( #"igazolja">).
Oroszországban a Moszkvai Állami Egyetem Humanitárius Technológiák Tanszékének alkalmazottai az elsők között vettek részt számítógépes tesztelésben. Számítógépes távoli tesztelési technológiákat fejlesztettek ki, amelyekben az oktatási vagy pszichológiai tesztelés funkciói a felhasználó helyi számítógépe (a "kliens") és a fejlesztő központi számítógépe (a "szerver") között vannak elosztva. Ez az új információs technológia lehetővé teszi a nemzetközi tudományos szabványoknak megfelelő tesztek gyors és széles körű terjesztését. Minden évben a tavaszi ünnepek alatt megrendezik a „Teletezés” távközlési olimpiát a végzősök számára ( #"igazolja">). A fenti oldalon interaktívan gyakorolhatja a demóteszt verziók egyes feladatainak (felletválasztós válaszokkal) végrehajtását különböző évek, beleértve az angol nyelvet is.
Angol nyelvű számítógépes tesztelést is végeznek különböző nyelviskolák Oroszországban. Például nyelviskolák BKC-Nemzetközi Ház ( #"justify">), átlátszó nyelv ( #"justify">) teszteket kínál az angol nyelvtudás szintjének meghatározására.
A számítógépes vezérlőrendszer széles lehetőségeket nyit meg a tanulók tanulási folyamatának egyénre szabására. Az adaptív tesztelés alapja a tanulás individualizálásának elve. Az adaptív tesztelés egy olyan vezérlő, amely lehetővé teszi, hogy az egyes tanulóknak az előző feladatra adott válasza függvényében állítsa be az egyes tanulóknak feladott feladatok nehézségét és számát: helyes válasz esetén a tanuló nehezebb következő feladatot kap, abban az esetben helytelen válasz esetén a feladat könnyebb, mint az előző. Az adaptív tesztelési mód (és nem csak a tesztelés, hanem a képzés is) egy sor feladatsort tartalmaz teszt formában, ami megköveteli a hallgatótól, hogy a képességei határáig dolgozzon, és ezzel biztosítva maximális hatás. A tanuló felkészültségének megfelelő feladatok alkalmazása az adaptív tesztelés során növeli a mérések pontosságát és csökkenti az egyéni tesztelés idejét.
Az adaptív tesztelés eredményeinek elemzése alapján lehetőség nyílik a tanulási folyamat személyiségorientált szemléletű felépítésére, azaz minden tanuló számára optimális nehézségi szintű oktatási feladatok kiválasztására. Köztudott, hogy a könnyű feladatok nem járulnak hozzá a fejlődéshez, a nehézek pedig csökkentik a tanulási motivációt. Ezért az optimális nehézségi szint 4 a tesztológia feladatai 50%-nak számítanak.
Az oktatás számítógépesítése és a pedagógiai mérések elméletének fejlesztése lehetővé teszi a tanulók tudásának, készségeinek és képességeinek objektívebb és pontosabb értékelését lehetővé tevő minősítési ellenőrzési rendszer létrehozását. A tanulás minősítő értékelése lehetővé teszi, hogy nagy megbízhatósággal jellemezzük a hallgató felkészültségének színvonalát egy adott tantárgyból. Az angolból lefordított "értékelés" egy értékelés, egy kvalitatív fogalom bizonyos numerikus jellemzője. A minősítés általában „halmozott pontszám” vagy olyan pontszám, amely figyelembe veszi az „előtörténetet”.
A moduláris képzés szigorú strukturálást igényel oktatási információk, a képzés tartalma és a hallgatók munkájának megszervezése teljes, logikusan kitöltött oktatási blokkokkal (modulokkal). A modul tartalma egybeesik a tantárgy tanulmányi témájával. Például egy modul az „Anglia és Amerika földrajza” téma tanulmányozásához. A modulban szereplő témával ellentétben azonban mindent mérnek, mindent értékelnek: az egyes feladatok elvégzését, az órai munkavégzést, az órákon való részvételt, a tanulói felkészítés kezdő-, közép- és zárószintjeit. A modul egyértelműen meghatározza a modul tanulási céljait, feladatait és tanulmányi szintjeit, valamint megnevezi a készségeket és képességeket.
A moduláris tanulás során a hallgatóknak mindig ismerniük kell egy listát az egyes modulokhoz tartozó alapfogalmakról, készségekről és képességekről, beleértve a tananyag minőségének kvantitatív mérőszámát is. A lista alapján kérdéseket és képzési feladatokat állítanak össze, amelyek a modulon belüli összes munkatípusra kiterjednek, és a modul tanulmányozása után ellenőrzésre kerülnek. Általános szabály, hogy be moduláris technológia tréning során az ellenőrzés tesztformáját alkalmazzák.
A képzési modulok és tesztek könnyen átvihetők számítógépes tanulási környezetbe. Sok orosz intézmények A távoktatási szolgáltatók modulok alapján építik fel tantervüket.
A moduláris képzésben az egyes feladatokat pontban értékelik, megállapítják annak minősítését és határidejét (a feladat időben történő elvégzését is a megfelelő pontszámmal értékelik), vagyis a minősítés ellenőrzésének fő elve a tudás minőségének ellenőrzése és értékelése. , készségek és képességek, figyelembe véve a tanulók szisztematikus munkáját .
A képzés befejezése után a modul értékelése alapján összesített osztályzatot határoznak meg, amelyet figyelembe vesznek a tárgyban végzett végső kontroll eredményének meghatározásakor.
Tehát a számítógépes tesztelés a képzéssel együtt ma az új információs technológia egyik fő módszere az idegennyelv-tudás szintjének felmérésére.
Betöltés...