Adaptīvo vadības sistēmu testi. Adaptīvās testēšanas koncepcija un tās īstenošanas principi. Adaptīvās testēšanas apakšsistēmas lietošanas gadījumu izveidotā diagramma ir A pielikumā

Viena no prioritārajām attīstības jomām Krievu izglītība ieslēgts mūsdienu skatuve ir nodrošināt pieejamību un vienlīdzīgas iespējas iegūt pilnvērtīgu izglītību, kā arī sasniegt principiāli jaunu profesionālās izglītības pakalpojumu kvalitāti. Acīmredzot galvenais līdzeklis šo mērķu sasniegšanai ir informācijas tehnoloģiju lomas un nozīmes palielināšana. Inteliģentu mācību sistēmu uzbūve ir liels solis ceļā uz elektroniskā pedagoģiskā satura attīstību un uzkrāšanu, kas mūsdienās sastāv no hiperteksta, elektroniskiem materiāliem un testiem. Galvenās prasības jaunajām mācību sistēmām ir: inteliģence, mērogojamība, atvērtība, elastība un pielāgošanās spējas visos mācību procesa posmos.

Pēdējā laikā arvien vairāk tiek izmantots dažādi posmi izglītības procesā tika saņemti dažāda veida elektroniskās diagnostikas mehānismi (materiāli) - datortesti. Diemžēl tradicionālā testēšana, kas tiek ieviesta, izmantojot standartizētus testus, pamazām zaudē savu aktualitāti. Tā attīstās un pārvēršas par modernām, efektīvākām viedām adaptīvās testēšanas formām. Viedās veidlapas zināšanu diagnostika balstās uz teorētiskiem un metodoloģiskiem pamatiem, kas atšķiras no tradicionālajiem un citām testu konstruēšanas un reproducēšanas tehnoloģijām. Sistēmas modelī jāiekļauj moduļi, kas īsteno adaptīvos algoritmus.

Adaptīvās testēšanas galvenā priekšrocība salīdzinājumā ar tradicionālo formu ir tās acīmredzamā efektivitāte. Adaptīvais tests ļauj diagnosticēt testa kārtotāja zināšanu līmeni, izmantojot ievērojami mazāku jautājumu skaitu. Mijiedarbojoties ar vienu un to pašu adaptīvo testu, testa kārtotāji ar augstu sagatavotības līmeni un testa kārtotāji ar zemu sagatavotības līmeni atrisinās pilnīgi dažādas uzdevumu apakškopas. Pirmais priekšmets redzēs ievērojami lielāku skaitu jautājumu ar augstu grūtības koeficientu, bet otrais ar zemu. Pareizo atbilžu procentuālais daudzums mācību priekšmetos var būt vienāds, taču punktu skaits būtiski atšķirsies.

Adaptīvā testēšana ļauj precīzāk izveidot testa kārtotāju zināšanu (apgūto kompetenču) modeli. Datora testēšanas sistēma pielāgojas lietotāja līmenim tieši testēšanas procesa laikā. Pateicoties elastīgiem adaptācijas mehānismiem, sistēma var noteikt, kuru jautājumu un ar kādu grūtības koeficientu uzdot subjektam katrā konkrētajā laika momentā. Piemēram, priekšmets sāk risināt diagnostikas kopu un viņam tiek uzrādīts uzdevums ar grūtības koeficientu b, kura risināšanā tiek pārbaudītas zināšanas kādas mazas didaktiskās vienības S ietvaros. Ja priekšmets viņam uzdoto uzdevumu risina pareizi, tad viņam tiek uzrādīts uzdevums. tad sistēmas analītiskais kodols izvēlas nākamo uzdevumu tajā pašā vienībā S, bet ar lielāku sarežģītības koeficientu utt. Ja subjekts nepareizi atbild uz sākotnējo didaktiskā elementa jautājumu, tad viņam tiek uzrādīts uzdevums ar zemāku grūtības koeficientu utt. Sarežģītības koeficientu robežvērtības ir aprakstītas diagnozē izmantotajā modelī.

Datora viedajai adaptīvajai testēšanas sistēmai jābūt ar šādu raksturlielumu kopu:

Atvērtība un paplašināmība . Sistēma jāveido uz modulāra pamata. Pamata moduļu aptuvenais sastāvs var būt šāds: "Bāze", "Testētājs", "Dizaineris", "Konfigurators", "Atskaites noformētājs", "Plānošanas modulis", "Bāze" ir paredzēta lietotāju saraksta uzturēšanai. instalēta programmas kopija, mācību priekšmetu saraksta sagatavošana, priekšmetu grupu direktorija pārvaldīšana, speciālas telpas konfigurēšana (sadalīšana tematiskajos blokos). "Constructor" paredzēts darbam ar testa uzdevumu datu bāzi un testu pakotņu izstrādei. “Konfigurators” ir paredzēts testēšanas darba vienumu iestatīšanai (testu savienošanai, testēšanas sesiju piešķiršanai). “Report Designer” ir paredzēts primāro testēšanas protokolu apstrādei un dažādu atskaišu veidošanai. “Plānošanas modulis” ir paredzēts, lai plānotu un uzraudzītu testēšanas procesu. Testētājs tieši ievieš adaptīvu mehānismu zināšanu līmeņa diagnosticēšanai.

Diagnostiskā satura reproducēšanas nelinearitāte. Atkarībā no iepriekšējo testa uzdevuma risināšanas rezultātiem ir jāievieš adaptīva inteliģenta nākamā testa uzdevuma atlase.

Zināmās grūtības . Visiem testa uzdevumiem ir jābūt sadalītiem grūtības kategorijās un tiem jābūt ar atbilstošu koeficientu, ar kuru var manipulēt adaptācijas procesā.

Diagnostikas modeļa universālums. Sistēma ļauj pilnīgi un kvalitatīvi pārbaudīt liela skaita eksaminējamo zināšanas bez ievērojamiem laika un resursu izdevumiem jebkura lieluma didaktiskajās vienībās.

Adaptīvās testēšanas rezultātu uzticamība un precizitāte. Tiek izmantota pieeja, kas pilnībā izslēdz efektīvo faktoru, analizējot subjekta zināšanu individuālo modeli.

Šobrīd ir izstrādāts un ieviests milzīgs skaits datoru testēšanas sistēmu. Šādas sistēmas ievērojami atšķiras pēc klasifikācijas parametriem. Un tagad mēs varam ar pārliecību teikt, ka adaptīvās datoru testēšanas sistēmas aktīvi ieņem savu nišu programmatūras tirgū pedagoģisko procesu organizēšanai un atbalstam.


Bibliogrāfija

  1. Ņikiforovs, O.Ju. Uz uzdevumu datubāzes bāzes datortestēšanas vides pielietošana testa formā augstskolas kvalitātes kontroles sistēmā. / O.Ju. Ņikiforovs, Ju.I. Nicoare // Tālākizglītības kvalitātes vadība: 2. starpreģionālās zinātniski praktiskās konferences rakstu krājums // Atbild. redaktors E.Yu. Bahtenko; Krievijas Federācijas Izglītības un zinātnes ministrija; Dziļums. Izglītība Vologs. novads; Vologda. Valsts ped. univ. – Vologda: VSPU, 2011. – 192 lpp. , Ar. 72-79.
  2. Ņikiforovs, O.Ju. MOODLE LMS testēšanas apakšsistēmas analīze // Informācijas tehnoloģijas zinātnē un izglītībā: Starptautiskās zinātniskās un praktiskās interneta konferences rakstu krājums. – Raktuves: Izdevniecība YURGUES, 2008. – 238 lpp.
  3. Ņikiforovs, O.Ju. Datora testēšanas sistēmas vispārināts komponentu modelis / O. Yu. Nikiforovs // Izglītība, zinātne, bizness: funkcijas reģionālā attīstība un integrācija: Viskrievijas zinātniskās un metodiskās konferences materiāli. – Čerepoveca, – 2006. – 309.-311.lpp.
  4. Ņikiforovs, O.Ju. Galvenie uzdevumu elementi testa formā / O. Ju. Ņikiforovs // Izglītība, zinātne, uzņēmējdarbība: reģionālās attīstības un integrācijas iezīmes: Viskrievijas zinātniskās un metodiskās konferences materiāli. – Čerepoveca, – 2006. – 315.-316.lpp.
  5. Ņikiforovs O.Ju., Kokšarova E.I. Funkciju komplekss datoru testēšanas sistēmu klasifikācijai // Modern Zinātniskie pētījumi un inovācijas. 2013. Nr.6
  6. Ņikiforovs, O.Ju. Datoru testēšanas sistēmu klasifikācijas pazīmes / O. Ju. Ņikiforovs // Izglītība, zinātne, bizness: reģionālās attīstības un integrācijas iezīmes: Viskrievijas zinātniskās un metodiskās konferences materiāli. – Čerepoveca, – 2006. – 312.-314.lpp.
Publikācijas skatījumu skaits: Lūdzu uzgaidiet 1

Saskaņā ar Krievu izglītības modernizācijas koncepciju var atzīmēt, ka galvenie centieni reformas īstenošanā mūsdienās ir vērsti uz informācijas tehnoloģiju lomas palielināšanu. Tos izmanto dažādos veidos: izglītības procesa vadīšanai, tiešai mācīšanai, asimilācijas kontrolei un pārbaudei praktisks pielietojums apmācāmo iegūtās zināšanas. Šim nolūkam pēdējā laikā arvien vairāk tiek izmantots dažādi posmi apmācības saņēma dažāda veida pārbaudes aptaujas. Pārbaudījumu pielietojuma klāsts ir ļoti plašs, sākot no īsas aptaujas pēc aktuālās tēmas skaidrojuma līdz gala, noslēguma vai iestājeksāmeniem. Tajā pašā laikā daudziem augstākiem izglītības iestādēm aktuāls jautājums ir informācijas tehnoloģiju izmantošana automatizētu apmācību un zināšanu kontroles sistēmu izstrādē. Galu galā šāda veida sistēmu izmantošana izglītības procesā ļaus pielietot jaunus adaptīvos testu vadības algoritmus, izmantot datoru multivides iespējas testa uzdevumos, samazināt dokumentu daudzumu, paātrināt aptaujas rezultātu aprēķināšanas procesu. , vienkāršot administrēšanu un samazināt testēšanas organizēšanas un veikšanas izmaksas. Noslēgumā var atzīmēt, ka datoru zināšanu kontroles sistēmas kļūst arvien populārākas, kas skaidrojams ar to objektivitāti, pieejamību un izmaksu efektivitāti.

Pamatojoties uz minēto, tika pieņemts lēmums izstrādāt programmatūras pakotni, universālu automatizētu adaptīvo testēšanas sistēmu (ASAT), kas ir līdzeklis dažāda veida testu izstrādei un veidošanai, kā arī tiek izmantota testēšanai un rezultātu apstrādei. Galvenā prasība izstrādātajai sistēmai bija tās inteliģence, kas panākta, organizējot testēšanas procesa pielāgojamību.

ACAT programmatūras pakotne nodrošina šādas iespējas testēšanas procesa organizēšanai:

Testa izveides procesa automatizācija, kvalitatīvs testēšanas process.

Sistēmas atvērtība un mērogojamība.

Stingra savienojuma trūkums ar kādu priekšmetu.

Vienkārša testu izveide un modificēšana.

Vairāku lietotāju darba iespēju nodrošināšana. Personalizēta piekļuve visu kategoriju lietotājiem.

Aizsardzība pret nesankcionētu piekļuvi pārbaudītajiem uzdevumiem.

Izstrādāti navigācijas rīki visos līmeņos testēšanas procesa laikā. Pārbaudes procesa dinamiskas kontroles līdzekļu pieejamība no skolotāja puses.

Pārbaudes materiāla pielāgošana (pielāgošana) studenta (studenta, studenta, speciālista u.c.) individuālajām īpašībām.

Adaptīva nākamā jautājuma atlase atkarībā no skolēna iepriekšējo atbilžu pareizības.

Datu bāzes aizpildīšana ar testa uzdevumiem, ļaujot strādāt gan ar teksta, gan grafisko, gan dinamisko testa informāciju.

Spēja izveidot dažādus uzdevumus no viena jautājumu kopas.

Kursa daļu testēšanas iespēja un rezultātā nokārtot gala eksāmena ieskaiti visa kursa garumā.

Liela skaita apmācāmo (studentu, skolēnu, speciālistu) pilnīgas un kvalitatīvas zināšanu pārbaudes nodrošināšana bez īpašiem laika un materiālajiem resursiem visās izglītības procesa sadaļās.

Testēšanas rezultātu ticamība, precizitāte un objektivitāte. Subjektīvās pieejas likvidēšana skolēnu zināšanu vērtēšanā.

Kļūdu rašanās iespējamības samazināšana, aprēķinot pārbaudes rezultātus un veidojot galīgo vērtējumu.

Skolotāju atbrīvošana no darbietilpīga darba ieskaites rezultātu apstrādē.

Ātra testēšanas rezultātu apkopošana un analīze jebkurā laikā ar iespēju ģenerēt periodiskus pārskatus un pārskatus dažādiem pieprasījumiem.

ASAT ieviešana Surgutas Valsts universitātes studentu mācību procesā un Hantimansu autonomā apgabala - Ugras izglītības iestādēs.

Saskaņā ar rezultātu novērtēšanas metodi testi ir divu veidu: tradicionālie un adaptīvie. Adaptīvā testa priekšrocība salīdzinājumā ar tradicionālo ir tā efektivitāte. Adaptīvā pārbaude var noteikt testa kārtotāja zināšanu līmeni ar mazāku jautājumu skaitu. Veicot vienu un to pašu adaptīvo testu, testa kārtotāji ar augstu sagatavotības līmeni un testa kārtotāji ar zemu sagatavotības līmeni redzēs pilnīgi atšķirīgus jautājumu kopas: pirmie redzēs lielāks skaits grūti jautājumi, bet pēdējais - vieglie. Pareizo atbilžu procentuālais daudzums abiem var būt vienāds, taču, tā kā pirmais atbildēja uz sarežģītākiem jautājumiem, viņš iegūs vairāk punktu. Vēl viens būtisks efekts ir uzticamības palielināšanās, jo šajā gadījumā tas tiek novērsts ātra mācīšanās uzdevumu banku, datorā vienkārši “noklikšķinot” uz opcijām (tādējādi var apgūt tikai vieglus uzdevumus, savukārt sarežģītie un daži vidējie izrādās neapgūti).

Šajā testēšanas sistēmā pielāgošanās spēja tiek izteikta relatīvo proporciju maiņā vieglu, vidēju un grūtu uzdevumu prezentācijā atkarībā no testēšanas sesijas laikā reģistrēto pareizo atbilžu skaita. Jāpiebilst, ka pāreja uz adaptīvā tehnika ir iespējams tikai tad, ja tiek uzkrāta nozīmīga uzdevumu banka ar empīriski izmērītu grūtības pakāpi. Pielāgošanās spēja tiek apvienota ar “kāpņu algoritma” principu - uzdevumu uzrādīšanu ar sistemātisku grūtības pakāpes paaugstināšanu. Vispirms tiek pasniegti vieglie uzdevumi, tad vidējie un, ja ieskaites kārtotājs ir veiksmīgs iepriekšējos līmeņos, tad grūti. Pēc katras atbildes testēšanas programma nosaka testa kārtotāja tā sauktās “agrās pārcelšanas” derīgumu uz augstāku līmeni. augsts līmenis grūtības. Katrā solī tiek novērtēta pareizo un nepareizo atbilžu skaita atšķirību nozīmīgums. Vērtībām, kas ir mazākas par 5% kļūdu līmeni (noraidot hipotēzi par vienādu pareizu atbilžu un kļūdu rašanās iespējamību), pārbaudes veicējs tiek pārcelts uz augstāku grūtības pakāpi. Ja noteiktā līmeņa uzdevumi ir izsmelti un ieskaites kārtotājs nav pārgājis uz nākamo grūtības pakāpi, tad testēšanas process beidzas un tiek noteikts ieskaites kārtotāja zināšanu līmenis.

Sistēma ir ieviesta trīs neatkarīgu moduļu veidā:

testēšanas modulis (paredzēts testu kārtotājiem);

kontroldarbu veidošanas un rediģēšanas modulis (paredzēts skolotājiem);

statistikas un rezultātu analīzes modulis (paredzēts skolotājam), ko var uzstādīt neatkarīgi vienu no otra dažādās klientu mašīnās;

Lai saglabātu sākotnējos datus un testu rezultātus, tiek izmantota datu bāze, kurā tiek glabāta testa uzdevumu banka, testa iestatīšanas parametri un testēšanas process, informācija lietotāja autentifikācijai, testu rezultāti un cita informācija par datu apstrādi.

Kontroldarbu izveides un rediģēšanas modulis identificē reģistrētos skolotājus vai reģistrē jaunus skolotājus, piekļūst datu bāzei, kurā tiek glabāti katra kontroldarba uzdevumi un atbildes, kā arī tā parametri, kā arī ļauj skolotājam izveidot jaunu kontroldarbu, mainīt esošās pārbaudes iestatījumus. pārbaudi, rediģē jautājumus un atbildes.

Jāņem vērā, ka skolotājs, ielogojies sistēmā, izmantojot savu lietotājvārdu un paroli, iegūst piekļuvi tikai savam kontroldarbu komplektam, nevarot apskatīt vai mainīt cita skolotāja kontroldarbus.

Izmantojot datu bāzi, testēšanas modulis identificē reģistrētos vai reģistrē jaunus lietotājus, atlasa testu, pārbauda subjektu, ekrānā parādot jautājumu un pēc tam saņem atbildi, apstrādā saņemtos datus un ieraksta testa rezultātus datu bāzē tālākai analīzei un izmanto skolotājs.

Pārbaudījumu kārtotāji var piekļūt tikai noteiktiem instruktora iepriekš piešķirtiem pārbaudījumiem. Šajā gadījumā tiek izmantots adaptīvais zināšanu kontroles algoritms, kas nosaka nākamā uzdevuma izvēli atkarībā no testa kārtotāja atbildēm uz iepriekšējiem jautājumiem. Šajā sistēmā nav iespējas izlaist jautājumu un atgriezties pie tā testēšanas beigās, tas ir saistīts ar faktu, ka atkarībā no tā, kā testa kārtotājs atbild uz aktuālo jautājumu, tiek noteikta nākamā uzdotā jautājuma izvēle. Pēc testa pabeigšanas testa kārtotājam tiek parādīts testa rezultāts un īss komentārs. Pārbaudes rezultāts ir rezultāts, ko lietotājs saņem, pamatojoties uz skolotāja norādītajiem kritērijiem šim testam.

Pārbaudes rezultātu statistikas un analīzes modulis sniedz skolotājam iespēju apskatīt atsevišķa skolēna vai visas grupas pārbaudes rezultātus vienam vai vairākiem kontroldarbiem ar dažādu detalizācijas pakāpi. Šajā gadījumā pārskatā tiek parādīti visu skolēnu rezultāti par visiem pārbaudījumiem, ko viņi kārtojuši saistībā ar konkrēta skolotāja izvēlēto mācību priekšmetu.

Tā kā testēšana notiek pēc pielāgošanās principa, tad jautājumi, kā arī to skaits viena testa ietvaros katram lietotājam nebūs vienādi. Tāpēc šis modulis nodrošina iespēju izvadīt ne tikai Galvenā informācija, bet arī detalizētāks pārskats par testu, kurā ir informācija par to, kādus jautājumus lietotājs saņēma un kā viņš uz tiem atbildēja.

Izveidotā sistēma atbilst mūsdienu prasībām prasības šāda veida sistēmas klasei gan pedagoģiskās pārbaudes, gan informācijas tehnoloģiju jomā.

Bibliogrāfiskā saite

Bušmeļeva K.I. AUTOMATIZĒTA ADAPTĪVĀS TESTĒŠANAS SISTĒMA // Pamatpētījums. – 2007. – Nr.2. – P. 48-50;
URL: http://fundamental-research.ru/ru/article/view?id=2517 (piekļuves datums: 18.09.2019.). Jūsu uzmanībai piedāvājam izdevniecības "Dabaszinātņu akadēmija" izdotos žurnālus

Adaptīvā testa kontrole tiek saprasta kā datorizēta zinātniski pamatota mācību rezultātu pārbaudes un novērtēšanas sistēma, kas ir ļoti efektīva, pateicoties adaptīvo testu rezultātu ģenerēšanas, prezentēšanas un novērtēšanas procedūru optimizācijai. Kontroles un novērtēšanas procedūru efektivitāte palielinās, ja tiek izmantota daudzpakāpju stratēģija uzdevumu atlasei un uzrādīšanai, pamatojoties uz algoritmiem ar pilnu konteksta atkarību, kurā nākamais solis tiek veikts tikai pēc iepriekšējā soļa rezultātu izvērtēšanas. Pēc tam, kad subjekts pabeidz nākamo uzdevumu, katru reizi ir jāpieņem lēmums par nākamā uzdevuma sarežģītības izvēli atkarībā no tā, vai iepriekšējā atbilde bija pareiza vai nepareiza. Uzdevumu atlases un pasniegšanas algoritms ir balstīts uz atgriezeniskās saites principu, kad, ja subjekts atbild pareizi, nākamais uzdevums tiek izvēlēts kā grūtāks, un nepareiza atbilde nozīmē nākamā vieglāka uzdevuma uzrādīšanu nekā tas, uz kuru ir jāatbild. subjektiem tika sniegta nepareiza atbilde. Tāpat iespējams uzdot papildu jautājumus par tēmām, kuras skolēns ne pārāk labi pārzina, lai precīzāk noteiktu zināšanu līmeni šajās jomās. Līdz ar to varam teikt, ka adaptīvais modelis atgādina skolotāja kārtošanu eksāmenā – ja skolēns pārliecinoši un pareizi atbild uz uzdotajiem jautājumiem, skolotājs viņam ātri ieliek pozitīvu atzīmi. Ja skolēns sāk “peldēt”, tad skolotājs viņam uzdod tādas pašas sarežģītības pakāpes papildu vai vadošus jautājumus vai par to pašu tēmu. Un visbeidzot, ja skolēns jau no paša sākuma atbild slikti, skolotājs arī pietiekami ātri ieliek atzīmi, bet negatīvu.

Priekšrocības:

Ļauj elastīgāk un precīzāk novērtēt apmācāmo zināšanas;

Ļauj izmērīt zināšanas ar mazāku uzdevumu skaitu nekā klasiskajā modelī;

Identificē tēmas, kuras skolēns pārzina slikti, un ļauj viņam par tām uzdot vairākus papildu jautājumus.

Trūkumi:

Iepriekš nav zināms, cik daudz jautājumu ir jāuzdod skolēnam, lai noteiktu viņa zināšanu līmeni. Ja ar testēšanas sistēmā iekļautajiem jautājumiem nepietiek, var pārtraukt testēšanu un novērtēt rezultātu, pamatojoties uz studenta atbildēto jautājumu skaitu;

Var izmantot tikai datorā.

Klasiskās zināšanu novērtēšanas skalas un vienumu atbildes teorija.

Klasiskā testēšanas teorija ( Klasiskā testa teorija - CTT ) sākotnēji radīts diagnostikas procedūru interpretācijai. Šī teorija tika radīta tīri lietišķām problēmām, tāpēc daži pieņēmumi, kas izmantoti šīs teorijas pamatos, ir jāprecizē, jo īpaši tāpēc, ka literatūrā šie pamati gandrīz netiek apspriesti.

Klasiskā testēšanas teorija skaidri paredz:

1. Viendimensionalitāte, t.i. Testa procedūra mēra tikai vienu kvalitāti, gatavību vai spēju.

2. Reprezentativitāte CTT ietvaros tiek saprasta kā konkrēta novērtējuma varbūtības neatkarība, no kuras vispārējās populācijas apakšgrupa veiks pārbaudi.

3. Uzdevumu neatkarība, t.i. uzdevumi ir neatkarīgi viens no otra.

4. Pārbaudāmo personu atbilžu neatkarība.

Abas minētās neatkarības ir saprotamas vismaz statistiskā nozīmē.

Tā kā diagnostikas procedūras vairumā gadījumu tika veiktas testu veidā un vairumā testu slēgtu vai retāk atklātu jautājumu veidā, tika pieņemts, ka katras atbildes rezultāts ir mērāms punktos kādā skalā.

Papildus skaidriem pieņēmumiem šī teorija satur dažus netiešus pieņēmumus. Jo īpaši netieši tiek pieņemts:

- izmērāmība visas iespējamās atbildes, t.i. efektīvas procedūras esamība atbildes iegūšanai uz jebkuru uzdoto jautājumu,

- pilnīgumu atbildes, t.i. saņemt atbildes uz visiem uzdotajiem jautājumiem, no kuriem izriet, ka atteikumi atbildēt netiek ņemti vērā,

- līdzvērtība visi jautājumi un līdz ar to visu saņemto atbilžu vienāds svars,

- dispersiju vienlīdzība izmantojot paralēlās atbildes veidlapas,

- normālais sadalījums atbildes.

Tāpat kā tehnisko mērījumu gadījumā, tiek netieši pieņemts, ka jebkurš mērījuma rezultāts sastāv no patiesās vērtības un mērījuma kļūdas, un mērījumu kļūdas tiek pieņemtas kā aditīvas, kas nepieciešamas pareizai pārejai no kļūdu summām uz vienu integrāli. kļūda, un tiek pieņemts, ka arī integrālā kļūda ir normāli sadalīta.

Cik pareizi šie pieņēmumi ir, parasti netiek apspriests. Ja kas, tad vislielākie jautājumi par CTT ir saistīti ar patiesas uzdevuma neatkarības nodrošināšanu. Netiek apspriests arī jautājums par vērtēšanas skalu izvēli, sākotnējais pieņēmums ir tāds, ka “neapstrādātie punkti” jau ir iegūti.

Smalkāks jautājums ir saistīts ar kategorijas “kļūda” metroloģisko nozīmi. Tehniskajos mērījumos netieši tiek pieņemts, ka kļūda un tās radītā kļūda ir mērījumu procedūras īpašība, un tāpēc kļūdu principā var novērtēt un ņemt vērā, pamatojoties uz verifikācijas un kalibrēšanas rezultātiem. . Mērot ergas elementus, parādās vēl viens kļūdu avots - mērāmā nestabilitāte, kas rodas dažādu faktoru darbības rezultātā, no kuriem svarīgākie ir mācīšanās, aizmirstība, nogurums un funkcionālā stāvokļa dinamika. Šo faktoru korekcijas metroloģijā netiek apspriestas.

Lai iegūtu galīgo novērtējumu, tiek izmantotas dažādas skaitļošanas procedūras. Visbiežāk vidējo punktu skaitu aprēķina, izmantojot parasto aritmētisko vidējo formulu, kur ir gala rezultāts i-th subjekts, un novirzes kvadrāts no šī rādītāja vidējā vai variantiem - standartnovirze vai dispersija. Rezultātu salīdzināšanai tiek izmantots korelācijas koeficients starp uzdevumiem un starp priekšmetiem.

Kā opcija dažreiz tiek izmantots veidlapas vidējais svērtais rezultāts, kur ir attiecīgie svēruma koeficienti.

No visiem iepriekš uzskaitītajiem pieņēmumiem visgrūtāk ir pierādīt atbilžu līdzvērtību, jo tam ir jāpierāda atbilstošo atbilžu visu grūtību subjektīvā vienlīdzība un vienlaikus jāpierāda visu uzdoto jautājumu vienlīdzība. . Minēto statistisko rādītāju saskaitāmības pieņēmumam ir nepieciešams saturiski pierādīt punktu skalas homeomorfās iegulšanas pareizību reālo skaitļu skalā, kurā šādi aprēķini faktiski tiek veikti. Citiem vārdiem sakot, jautājumi gan par kritērija, gan konstrukcijas derīgumu parasti paliek atklāti.

Papildus iepriekš minētajiem standarta statistikas rādītājiem (jautājums par to matemātisko pareizību parasti netiek apspriests) priekšmetos tiek novērtētas dažas mērīšanas procedūru psihometriskās īpašības ar skaidru pragmatisku, bet apšaubāmu matemātisko nozīmi, piemēram,

Uzdevuma viegluma koeficients (vai līdzīgs grūtības koeficients), kur ir vidējais par uzdevumu saņemtais rezultāts, ir maksimālais iespējamais punktu skaits par vienu un to pašu uzdevumu, neskatoties uz to, ka jebkura uzdevuma minimālais iespējamais punktu skaits ir nulle. pēc noklusējuma,

Uzdevuma diskriminācijas koeficients, t.i., korelācijas koeficients starp uzdevuma rezultātu un gala rezultātu, jeb tas, kas tiek uzskatīts par informatīvāku variantu, ir korelācijas koeficients starp uzdevuma rezultātu un gala rezultātu, neņemot vērā šo uzdevumu,

un daži citi koeficienti, kuru interpretācija šajā zinātnē atšķiras no vispārpieņemtās.

It īpaši, uzticamībašeit atšķirībā no standarta izpratnes tā tiek uzskatīta par nevis sistēmas vai objekta, bet mērījuma kvalitāti, un netiek vērtēta pēc pareizas darbības laika vai kādiem šī laika variantiem, piemēram, laika izteiksmē. starp neveiksmēm, bet kā iespēja iegūt salīdzināmus rādītājus, kas novērtēti ar korelācijas koeficientu. No šīs interpretācijas mēs iegūstam pastāvīga uzticamība, t.i., korelācijas koeficients starp divu uzdevumu izpildes rezultātiem, starp kuriem laika attālums ir pietiekams, lai šos uzdevumus uzskatītu par subjektīvi neatkarīgiem, paralēla ticamība, t.i. korelācijas koeficients starp uzdevumu variantu rezultātiem, detaļu uzticamība, t.i. korelācijas koeficients starp visas mērījumu procedūras un jebkuras tās daļas rezultātiem un citiem rādītājiem. Citiem vārdiem sakot, konsekventu ticamību šajā zinātnē sauc par to, ko profesionālajā mērīšanas teorijā uzskata par testa atkārtotas pārbaudes derīguma kvantitatīvu mēru, paralēlā uzticamība un formas ticamība ir testa apakštesta derīguma mērs, un kopumā terminoloģijā ir neskaidrības, kas rada apjukumu derīgumā un uzticamībā.

Saskaņā ar citu versiju ticamības koeficients ir definēts kā , kur ir mērījumu kļūdu dispersija un ir iegūto punktu dispersija, t.i., laiks šajā ticamības koeficienta definīcijā vispār nav minēts.

Šādu aprēķinu apšaubāmība no matemātiskā viedokļa ir saistīta ar to, ka sākotnējie dati sākotnēji tika iegūti punktu skalā, uz kuras dažkārt tiek norādīta secības un pat lineārā secība, bet aritmētiskās darbības nav definētas. . Tāpēc vidējo, svērto vidējo, dispersiju un korelāciju saskaitīšana un turpmākais aprēķins punktu skalā nav definēts. Vēl viens pieņēmums, kas ir saprotams no pragmatiskā viedokļa, bet ar nepārprotami neadekvātu teorētisko pamatojumu, ir apgalvojumi par normālu atbilžu sadalījumu un līdz ar to arī “neapstrādāto punktu” sadalījumu reālo skaitļu skalā. Pieņēmums par lognormālu vienādu punktu sadalījumu bieži šķiet ticamāks, bet parasti arī nav pamatots. Šie pieņēmumi dod iespēju izmantot labi zināmas metodes rezultātu statistiskai apstrādei, bet visu turpmāko aprēķinu matemātiskā pareizība pēc šī pieņēmuma netiek apspriesta.

Literatūrā plaši aplūkotas daudzas tradicionālās pieejas problēmas zināšanu skalu (metriku) konstruēšanā kā punktu dažu īpaši atlasītu uzdevumu kopu izpildei.

Pirmkārt, ir gandrīz neiespējami pierādīt test-to-test un intertest derīgumu, tāpēc atklāts paliek jautājums par salīdzināšanu un vēl jo vairāk par mērījumu rezultātu vispārējo uzskaiti, kas veikta, izmantojot dažādas metodes.

Vairākkārt ir atzīmēti “malu efekti”, t.i., rezultātu relatīvā stabilitāte tuvāk atbildes sadalījuma mediānai un nestabilie rezultāti šī sadalījuma malās, kas parasti tiek skaidrots ar ārvalstu faktoru pieaugošo lomu gan “apakšējā līmenī”. ” un izplatīšanas “augšējās” daļas. Lai cīnītos pret šīm sekām, parasti tiek piedāvāts empīriski pamatots ieteikums noteikt kādu sadalījuma “uzticamības kvantili”, parasti tiek piedāvāts pieņemt vai, ja atbilde ir zemāka vai augstāka, pielāgoties nestabilitātei, galvenokārt, pārvērtēt iegūto. aplēses, izmantojot empīriski atlasītas korekcijas formulas.

Slēgto jautājumu gadījumā ir iespējamas nejaušas minēšanas situācijas, lai labotu datus šajā gadījumā, tiek piedāvāts veikt labojumus veidlapā , kur rezultāts pēc labošanas, ir rezultāts (punktos vai citās skalās) atbilde uz jautājumu pirms labošanas ir iespējamo atbilžu skaits uz jautājumu, w- neizpildīto uzdevumu skaits mērījumu sērijā. Šī formula ir empīriski pamatota, jo īpaši jautājums par to, vai šajā formulā ir ieteicams ņemt vērā neizpildītos uzdevumus, kuriem tiek apspriesta atbilstošā vērtība, kas samazina vērtību, un notiek diskusijas par šādu grozījumu saturu.

Kopumā zināšanu kvalitātes metriku klasiskajā pieejā pamato ar metožu statistisko kalibrēšanu attiecīgajai populācijai. Kopš radīšanas IQ zināšanu mērījumu metroloģiskais pamatojums tiek veikts, balstoties uz atbilstošajam respondentu kontingentam aprēķinātajiem punktu sadalījumiem. Piemēram, ir norādītas vidējās vērtības IQ pēc vecuma, sociālajām vai profesionālajām grupām. Tomēr no atšķirības IQ Nav skaidrs, kādas fundamentālas atšķirības zināšanu struktūrā atšķir šīs grupas.

Avots:
  • http://cblis.utc.sk/cblis-cd-old/2003/3.PartB/Papers/Science_Ed/Testing-Assessment/Papanastasiou.pdf
  • anotācija

    Datorizētai apmācībai (CBT) var būt liels potenciāls, ja to pareizi izmanto, lai uzlabotu mācīšanos. Tomēr šo kvalitāti var uzlabot, izmantojot datorizētu testēšanu (CT) un, konkrētāk, datoru adaptīvo testēšanu (CAT). Šī darba ietvaros autore apraksta datoru adaptīvās testēšanas mehānismu un priekšrocības, kā arī to, kā tā var uzlabot mācību procesu dabaszinātņu priekšmetā. Pedagogs tiek mudināts ņemt vērā dažus ierobežojumus un izaicinājumus ieviešanā, un tiks apspriesta arī dabaszinību izglītība. ATSLĒGVĀRDI Datoru adaptīvā pārbaude, CAT, datoru testēšana, datoru apmācība, dabaszinību izglītība, vērtēšana, atgriezeniskā saite.

    IEVADS

    Datorizētām mācībām ir ārkārtīgi liels potenciāls, lai uzlabotu mācīšanos daudzās jomās un disciplīnās, tostarp dabaszinātņu jomā. Tomēr datorizētā apmācība ir rūpīgi un nepārtraukti jāuzrauga, lai nodrošinātu tās efektivitāti. Tas jo īpaši attiecas uz to, ka daži iepriekšējie pētījumi liecina, ka datora lietošana ir negatīvi saistīta ar sasniegumiem matemātikā un dabaszinātnēs (Papanastasiou and Ferdig, 2003). Lai gan nav skaidrs, kādos apstākļos šie Negatīvās sekas attīstās, un, ja starp šiem mainīgajiem lielumiem pastāv cēloņsakarība, kāpēc tā joprojām pastāv. Tāpēc šīm attiecībām vajadzētu atgādināt pedagogam, ka datora lietošana nebūt nav "panaceja" un to nedrīkst lietot bezatbildīgi un piesaistīt to skolēnu uzmanību, kuriem ir grūti tikt galā. Arī šai negatīvajai saiknei starp datora lietošanu un sasniegumiem vajadzētu atgādināt pedagogiem, ka zinātnē ir būtiski nepieciešams pastāvīgs konstruktīvs un apkopojošs novērtējums. Ar pareizas novērtēšanas palīdzību var identificēt problēmas, kas rodas mācīšanās laikā, un, iespējams, novērst tās, ja tās tiek atklātas pietiekami agri. Taču arī vērtēšana ir jāizmanto saprātīgi, lai tā papildinātu mācību procesu. Tā kā šīs konferences uzmanības centrā ir datorizētas mācības, šis raksts būs saistīts ar datorizētu vērtēšanu. Šī raksta mērķis ir iziet tālāk par vienkāršu datorizētu apmācību, lai aprakstītu datoru adaptīvo testēšanu, un apspriestu tās sekas, priekšrocības un to, kā tā var efektīvi papildināt datorizētu apmācību šajā zinātnes jomā.

    Apraksts

    Datorizēto testēšanu (CT) var definēt kā jebkura veida novērtējumu, kas tiek veikts, izmantojot datoru. Tomēr datora testēšana var ilgt dažādas formas, atkarībā no tā, cik pielāgots tests ir (College Board, 2000). Piemēram, daži datorizēti testi, ko sauc arī par fiksētajiem datorizētajiem testiem, ir tikai lineāri (Parshall, Spray, Kalohn un Davey, 2002). Tie ir testi, kas visvairāk līdzinās papīra un zīmuļu testēšanai, jo tiem ir noteikta forma, noteikts garums un testa vienumi ir iepriekš iestatīti noteiktā secībā. Atšķirībā no fiksētajiem datorizētajiem testiem, datoru adaptīvie testi (CAT) ir datorizēti testi, kuriem ir maksimālā pielāgošanās spēja, jo tos var pielāgot katram skolēnam, pamatojoties uz vispārējām grūtībām un secību, kādā jautājumi tiek iesniegti testa kārtotājam. Tātad datoru adaptīvie testi (CAT) ir datora testi, kas tiek izveidoti un pielāgoti īpaši katram testa kārtotājam, pamatojoties uz testa kārtotāja spēju novērtējumu un balstoties uz iepriekšējo darbību atbildēm.

    Datoru adaptīvo testu priekšrocības

    Datoru adaptīvās testēšanas galvenās priekšrocības ir saistītas ar to, ka tās ir efektīvas gan laika, gan izmantoto resursu ziņā. Šie ieguvumi tiks apspriesti nākamajā sadaļā gan no ieskaites kārtotāju viedokļa, gan no skolotāja viedokļa, kurš vēlas noteikt skolēna zināšanu līmeni, gan arī no testa izstrādātāja viedokļa.

    Efektivitāte

    Adaptīvie testi ļauj precīzāk un ar zemākām izmaksām novērtēt subjekta spējas, nekā izmantojot papīra testus. Tipiski papīra testi ir izveidoti masu pārbaudei, lai tests tiktu veikts lielai studentu grupai ar dažādām spējām. Lai to izdarītu, lielākā daļa šajā testā uzdoto jautājumu ir vidējas grūtības pakāpes (jo lielākajai daļai skolēnu ir vidēji kvalitatīvi sasniegumi), līdz ar to šāda veida pārbaudes darbu saturs rada problēmas skolēniem ar augstu un zemu sasniegumu līmeni. Testa kārtotājs ar zemu zināšanu līmeni spēj atbildēt uz dažiem pirmajiem samērā viegliem jautājumiem. Un uz vidējas un augstas grūtības pakāpes jautājumiem skolēnam nebūs viegli atbildēt. Līdz ar to testa kārtotājs var uzminēt atbildes uz šiem jautājumiem vai vienkārši atstāt tās tukšas. Šajā gadījumā ir grūti īsti novērtēt viņa zināšanas un spējas, jo jebkādi secinājumi jābalsta tikai uz atbildēm uz pirmajiem jautājumiem, ko students varēja saprast. Cits, vairāk konkrēts piemērsŠī situācija ir norādīta zemāk. Skolotājs vēlas veikt bioloģijas testu par tēmu “aknas” Jautājums zems līmenis nepieciešams identificēt aknu atrašanās vietu cilvēka attēlos, un augsta līmeņa jautājumiem ir nepieciešama skolēna spēja diagnosticēt aknu slimību pēc attēliem. Šajā gadījumā, ja skolēns cilvēka ķermeņa attēlā pat nevar noteikt aknu atrašanās vietu, nav pamata viņam uzdot sarežģītāku jautājumu. Raugoties uz šādiem pārbaudījumiem no skolēna ar dziļām bioloģijas zināšanām viedokļa, situācija ir nedaudz labāka, lai gan tā joprojām nav ideāla. Lielākā daļa jautājumu šai personai būs pārāk viegli. Adaptīvie testi ļauj efektīvi atlasīt jautājumus, kas ir īpaši izstrādāti katra testa kārtotāja noteiktam zināšanu līmenim. Ja visi jautājumi ir skaidri vērsti uz katra skolēna spējām, skolotājs var izdarīt ticamākus un pamatotākus secinājumus par skolēna faktiskajām zināšanām.

    Atsauksmes

    Vēl viena datorizētas testēšanas priekšrocība kopumā, kā arī datoradaptīvie testi ir tā, ka tie var manipulēt ar tiešu un tūlītēju studentu un skolotāju atgriezenisko saiti (Wise & Plake, 1990). Izmantojot tipisku papīra pārbaudes darbu, vienmēr pastāv laika aizkave starp skolotāju un testa kārtotāju. Neveidojot vērtējumu, skolotāji nevarēs noteikt, vai datorizētā apmācība patiešām ir paredzēta, lai palīdzētu skolēnam mācīties vai nē. Tas ir īpaši svarīgi, jo bez pienācīga novērtējuma daži studenti var nonākt neizdevīgā situācijā saistībā ar datorapmācību. Papildus kopējais novērtējums, šāda veida vērtēšana parāda, kā katrs skolēns ir apguvis materiālu kopumā, kā arī var sniegt sarakstu ar jomām un priekšmetiem, kuros katram skolēnam bija jautājumi, pamatojoties uz viņa sniegumu adaptīvajā testēšanā. Tomēr skolotājam var rasties šāds jautājums, nepārtraukti veicot testēšanu, iespējams, ka daži skolēni atcerēsies testa jautājumus un informēs par tiem citus skolēnus. Tomēr, ja adaptīvajā testā ir salīdzinoši liels jautājumu kopums, šī problēma neradīsies, jo īpaši tāpēc, ka dažādiem studentiem ir jāpiešķir dažādi priekšmeti, pamatojoties uz viņu individuālajiem spēju līmeņiem.

    Laiks

    No testa izstrādātāja viedokļa adaptīvā testa izveide ir laikietilpīga, taču efektīvāka no skolotāja viedokļa. Jo īpaši studentiem adaptīvās testēšanas laikā ir jāatbild uz mazāk jautājumu nekā parastās pārbaudes laikā. Turklāt regulāru pārbaudi parasti veic visa grupa noteiktu laiku, kas dažiem skolēniem var nebūt piemērots. Skolotājam un visai grupai jāgaida, līdz visi skolēni ir pabeiguši testu, pirms viņi var pāriet uz citu darbību. Izmantojot datora adaptīvo testēšanu, skolēni var kārtot eksāmenu, kad vien ir gatavi, vienīgā prasība ir, lai dators būtu pieejams, un viņiem nav jāgaida, kamēr visa grupa būs gatava kārtot testu vai kamēr visa grupa to pabeigs. . No skolotāja viedokļa adaptīvā pārbaude ietaupa laiku, un skolotājam vairs nav jāuztraucas par testu izveidi grupai, ja vien CAT spēj aptvert aplūkoto materiālu. Turklāt skolotājs ietaupa laiku darbu pārbaudei, jo kontroldarbu vērtē dators.

    Citas priekšrocības

    Datoru adaptīvajai pārbaudei ir arī dažas papildu priekšrocības. Datoru adaptīvajai pārbaudei ir augsts drošības līmenis, jo jautājumu sarakstu vairs nevar nozagt, un krāpšanās no kaimiņiem nav izdevīga, jo lielākā daļa testa jautājumu ir katram individuāli. Turklāt, izmantojot CAT, var ievākt cita veida datus, piemēram, laiku, kas nepieciešams, lai atbildētu uz katru jautājumu, vai izmaiņu skaitu, kas skolēniem tiek veiktas, pildot testu.

    SECINĀJUMS

    Mūsdienu pētījumi testēšanas un novērtēšanas jomā ir pierādījuši, ka ir palielinājies datoru adaptīvo testu potenciāls. Datoru adaptīvās testēšanas priekšrocības un iespējas ļauj iet vēl tālāk. Tas ir redzams daudzos liela mēroga testos (piemēram, GRE, TOEFL, ASVAB), kas ir kļuvuši vai kļūst adaptīvi (Papanastasiou, 2001). Tomēr šāds solis vienmēr ir jāsper saprātīgi, lai šāda vērtēšanas procedūra būtu labi integrēta mācību procesā un nodrošinātu tā maksimālu efektivitāti.

    Saites

    1. Bennett, R. E. (1999). Jaunu tehnoloģiju izmantošana, lai uzlabotu novērtējumu. RR99-6. Prinstona, Ņūdžersija: Izglītības pārbaudes dienests. 2. Lord, F. M. (1980). Vienumu atbildes teorijas pielietojumi praktiskās pārbaudes problēmās. Hillsdale, Ņūdžersija: Lorensa Erlbauma līdzstrādnieki. 3. Meijers, R. R. & Nerling, M. L. (1999). Datorizēta adaptīvā testēšana: pārskats un ievads. Lietišķā psiholoģiskā mērīšana, 23(3), 187-194. 4. O'Nīls, K. (1995). Eksaminējamo ar invaliditāti sniegums datorizētos akadēmisko prasmju testos. Referāts tika prezentēts Amerikas izglītības pētniecības asociācijā Sanfrancisko, 1995. gada aprīlī. 5. Papanastasiou, E. C. (2001). “Pārkārtošanas procedūra” adaptīvo testu administrēšanai, ja ir atļautas pārskatīšanas iespējas. (doktora disertācija, Mičiganas štata universitāte, 2001). 6. Papanastasou, E. (2002a). “Pārkārtošanas procedūra” adaptīvo testu vērtēšanai ar pārskatīšanas iespējām. Referāts tika prezentēts Nacionālajā izglītības mērīšanas padomē, Ņūorleānā, LA. 7. Papanastasou, E. (2002b). Faktori, kas atšķir matemātikas studentus Kiprā, Honkongā un ASV. Izglītības pētījumi un novērtēšana, 8(1), 129-146. 8. Papanastasiou, E. C. & Ferdig, R. E. (2003, janvāris). Datora lietošana un matemātiskā pratība. Esošo un potenciālo attiecību analīze. Referāts trešajā Vidusjūras konferencē par matemātikas izglītību, Atēnās, Grieķijā, 2003. gada 3.–5. janvārī. 9. Parshall, C. G., Spray, J. A., Kalohn, J. C. & Davey, T. (2002). Praktiski apsvērumi datorizētā testēšanā. NY: Springers. 10. Parshall, C. G., Stewart, R., & Ritter, J. (1996). Inovācijas: grafika, skaņa un alternatīvie reakcijas režīmi. Referāts tika prezentēts Nacionālās izglītības mērīšanas padomē, 1996. gada 9.–11. aprīlī, Ņujorkā. 11. Koledžas valde. (2000, aprīlis). Pārskats par datorizētu testēšanu. RN-09. 12. Veiners, H. (2000). KAĶI: kur un kad. Psicologica, 21(1-2), 121-133. 13. Wise, S. L. & Plake, B. S. (1990). Datorizēta pārbaude augstākajā izglītībā. Mērīšana un novērtēšana konsultēšanā un attīstībā, 23, 3-10.

    Elena C. Papanastasou, Ph.D. Kanzasas Universitāte un Kipras Universitātes Izglītības departaments P.O. Box 20537 1678 Nikosija Kipra

    Viena no aktīvi attīstītajām un daudzsološajām jomām mūsdienu svešvalodu mācīšanas metodēs ir datortehnoloģiju izmantošana, lai kontrolētu runas prasmju un spēju attīstības līmeni.

    Datortestēšana dod iespēju testa uzdevumos integrēt teksta, grafisko, audio un video informāciju, kā arī pilnībā automatizēt kontrolmērījumu veikšanas procesu.

    Datora pārbaude ļauj:

    ātri apstrādāt ievades informāciju;

    nodrošināt darbību atsauksmes, kas ļauj pārbaudāmajam pastāvīgi un nekavējoties saņemt pastiprinājumu par atbildes pareizību, bet skolotājam – pakāpeniski vai operatīvi kontrolēt ieskaites kārtotāja darbības;

    paaugstināt testa kārtotāja motivāciju, jo, strādājot ar datorprogrammu, parādās neparastuma elements, kas līdzīgs spēles situācijai, parādās sacensību gars ar datoru;

    ievērojami ietaupa laiku un izmaksas testēšanas organizēšanai un veikšanai.

    Tātad pirmais uzdevums, ko dators var efektīvi atrisināt, ir testa uzdevumu glabāšana un no tiem testu veidošana, proti, primārā, oriģinālā autora materiāla apstrāde, nepieciešamo precizējumu, labojumu un papildinājumu veikšana; uzglabāt informāciju, atlasīt uzdevumus no elektroniskās datu bankas pēc noteiktiem kritērijiem un izveidot nepieciešamo testu izkārtojumu.

    Otrs uzdevums, ko dators īsteno, ir testa dalībnieku reģistrēšana un sagatavošana uzdevumu veikšanai. Piemēram, reģistrācija, kas var būt pirms testēšanas vai tieši pirms testēšanas, ietver reģistrācijas kartes aizpildīšanu datora ekrānā. Saņemot nepieciešamo informāciju, sistēma sniedz testa kārtotājam identifikācijas numurs.

    Dators var sagatavot testa veicēju testa kārtošanai – sniegt norādījumus. Datorprogrammā ir iekļauta informācija par metodiku darbam ar testu: ieteikumi par testa veikšanas tehnoloģiju, dati par testēšanas laiku, vērtēšanas procedūru u.c. Sagatavošanās testam var ietvert arī apmācību, kas izskaidro, kā reaģēt uz noteiktiem uzdevumiem , izvairīties no nejaušām (kas nav saistītas ar testa kārtotāja valodas un runas kompetenci) kļūdām, veidot nepieciešamos pagaidu stereotipus.

    Nākamais posms ir testēšanas sesijas veikšana, izmantojot datoru. Šī posma galvenā problēma ir darba ilgums. Tāpēc ir svarīgi iekļaut datorprogrammā testējamā atvēlētā, pavadītā un atlikušā laika displeju, uzskaiti un kontroli.

    Lai sāktu darbu, testa kārtotājam jānorāda savs identifikācijas numurs, t.i., reģistrācijas laikā saņemtais numurs. Pēc tam viņam tiek iesniegts tests ar uzdevumiem un norādījumiem to izpildei.

    Pārbaudes sesijas pabeigšana var būt brīvprātīga (pēc testa kārtotāja pieprasījuma un ar instruktora atļauju, kad uzdevumi ir izpildīti) vai piespiedu kārtā (termiņa beigās).

    Ja testa autori-sastādītāji nav īpaši sakārtojuši testa uzdevumus pēc grūtības pakāpes, nesadalījuši testu apakštesta sadaļās, kas bija autonomas izpildes mērķu un runas aktivitātes veidu ziņā, tad testu ir atļauts veikt. jebkurā secībā. Pretējā gadījumā datorprogramma aizliedz noteiktu uzdevumu izlaišanu, piemēram, tos, kas šķita grūti, un pie tiem atgriezties.

    Pēc testa uzdevumu izpildes sākas atbilžu apstrādes un punktu skaitīšanas posms. Saskaņā ar V. I. Nardjuževa, I. V. Nardjuževa klasifikāciju apstrāde var būt:

    lokāls, veikts pārbaudes vietā;

    attālināti, kas tiek veikti ārpus testēšanas sesiju vietas;

    formāls, ja iespējams vienkāršs salīdzinājums ar atslēgām;

    eksperts, ja šāds salīdzinājums nav iespējams un nepieciešama ekspertu un speciālistu piesaiste (piemēram, lai izvērtētu detalizētu mutisku vai rakstisku atbildi);

    darbojas, ļaujot uzreiz pēc testēšanas uzrādīt rezultātus;

    atlikts sarežģītā punktu aprēķināšanas algoritma vai nepieciešamības iegūt vērtētāja vai eksperta atzinumu dēļ.

    Datora izmantošana ļauj veikt informācijas statistisku analīzi, t.i., no vienas puses, sniegt informāciju par testa dalībniekiem, no otras puses - kas ir vissvarīgākais pašreizējā lingvodidaktiskās testēšanas attīstības stadijā - apkopot datus par kvalitāti. no testa materiāliem.

    Pirmajā gadījumā analīzes algoritms pieņem:

    )statistiskās analīzes objekta izvēle (apakštests);

    ) testēšanas dalībnieku skaita noteikšana noteiktā līmenī;

    )pārbaudes kārtotāju sakārtošana pēc iegūto punktu skaita;

    ) katra testa uzdevuma pareizo atbilžu procentuālā daudzuma noteikšana;

    )grafiku konstruēšana, izmantojot digitālos datus;

    )ja nepieciešams, testu rezultātu salīdzināšana dažādiem objektiem.

    Otrajā gadījumā statistisko analīzi veic, izmantojot:

    ) pārbaudes rezultātu minimālās, vidējās, maksimālās vērtības noteikšana;

    )uzdevuma statistisko parametru noteikšana: grūtības pakāpe, diferencēšanas spēja (uzdevuma spēja atšķirt spēcīgus skolēnus no vājiem);

    )izklaidēju darba analīzi, tai skaitā nosakot atbilžu izvēles biežumu katram, kā arī vājām un stiprām;

    ) uzdevumu neatkarības noteikšana ieskaitē.

    Datortestēšana iespējama ar īpaši izstrādātu programmatūru, kas realizē autoru piedāvāto informācijas un pedagoģiskās testēšanas modeli.

    Datorprogrammatūra būtiski ietekmē gan testa uzdevumu saturu (piemēram, skaņas izmantošanai nepieciešams dators aprīkot ar skaņas karti), gan informācijas un pedagoģiskā modeļa realizācijas metodi (piemēram, datoru pieslēgšana internetam ļauj organizēt un veikt testēšanu reāllaikā).

    Datorprogrammas testēšanai svešvaloda var klasificēt atkarībā no programmēšanas metodes. Programma var būt lineāra: šajā gadījumā tiek nodrošināta vienīgā lieta iespējamais virziens strādāt ar testu, neatkarīgi no skolēnu atbildes kvalitātes uz konkrēto jautājumu vai uzdevumu. Piemēram, testa kārtotājam, izpildot uzdevumus, lai pārbaudītu lasīšanas izpratni, ir jāizvēlas viena no atbilžu iespējām:

    Lineāro programmu var sarežģīt pielāgošanas posms (piemēram, veicot uzdevumus, lai pārbaudītu gramatikas prasmes). Šādā gadījumā, ja atbilde ir nepareiza, dators atgriež testa izpildītāju pie sākotnējā uzdevuma, norādījuma vai noteikuma.

    Sazarotā programma sniedz paskaidrojumus, papildu, vadošus jautājumus un norādījumus, kas palīdz izpildīt sākotnējos uzdevumus un iegūt atļauju secīgai kustībai vai kustībai cauri kadram.

    Programmas, kas apvieno lineāras un sazarotas sadaļas, tiek klasificētas kā jauktas vai kombinētas. Tie nodrošina lielāku vadības elastību un pielāgo darbu studentu individuālajām iespējām. Tajā pašā laikā datortestēšanai svešvalodā ir sava specifika un savas prasības kontrolētā materiāla pasniegšanai un uzdevumu izpildei. Viens no galvenajiem uzdevumiem ir maksimāli izmantot visus informācijas pasniegšanas kanālus, izmantojot multimediju tehnoloģijas (grafikas, animācijas klipus, video attēlus), kā arī dažādas saites uz dokumentiem un resursiem (uzziņu grāmatas, leksiskie minimumi, intonācijas kontūras u.c. .). Savukārt datordidaktiskās vizualizācijas izmantošana, simulējot komunikācijas situācijas un organizējot uzdevumu izpildi un atbilžu labošanu, paaugstina datorprogrammu monitoringa produktivitāti un ieskaites kārtotāju motivāciju apgūt svešvalodu.

    Datoru testēšanas iespējas

    Šodien pasaulē tādi ir dažādas organizācijas, kas nodarbojas ne tikai ar problēmu izstrādi, bet arī ar datoru testēšanas sistēmām. To vidū ir Izglītības pārbaudes dienests (ETS) — Izglītības pārbaudes dienests ( #"justify">), kas kopš 1970. gada nodarbojas ar datoru testēšanas jautājumiem un piedāvājumiem Šis brīdis TOEFL datora versijas ( #"justify">) - angļu valodas kā svešvalodas tests. Šo testu veica angļu valoda kā svešvalodu to lieto uzņemšanai koledžās ASV un Kanādā.

    Francijā Nacionālais tālmācības centrs (Centre national denseignement à distance) piedāvā testa datora versiju angļu valodā kā svešvalodā: Test FLE - Test de Français langue étrangère et seconde - niveau général (élémentaire, intermédiaire, avancé) : compréhension écrite, gramaire, vocabulaire , compréhension orale ( #"attaisnot">). Pārbaude ļauj noteikt angļu valodas kā svešvalodas zināšanu līmeni. Angļu valodas skola "LEcole des Trois Ponts" piedāvā arī interaktīvus testus vispārējai angļu valodas zināšanai ( #"attaisnot">).

    Krievijā Maskavas Valsts universitātes Humanitāro tehnoloģiju katedras darbinieki bija vieni no pirmajiem, kas iesaistījās datoru testēšanā. Ir izstrādātas datorizētas attālās testēšanas tehnoloģijas, kurās izglītojošās vai psiholoģiskās testēšanas funkcijas tiek sadalītas starp lietotāja lokālo datoru ("klientu") un izstrādātāja centrālo datoru ("serveri"). Šī jaunā informācijas tehnoloģija ļauj ātri un plaši izplatīt testus, kas atbilst starptautiskajiem zinātniskajiem standartiem. Katru gadu pavasara brīvdienās absolventiem notiek telekomunikāciju olimpiāde “Teletings” ( #"attaisnot">). Iepriekš minētajā vietnē varat interaktīvi vingrināties dažu demo testa versiju uzdevumu izpildē (ar atbilžu variantiem). dažādi gadi, tostarp angļu valodā.

    Datoru testēšanu angļu valodā veic arī dažādi valodu skolas Krievijā. Piemēram, valodu skolas BKC-International House ( #"justify">), caurspīdīga valoda ( #"justify">) piedāvā testus angļu valodas prasmes līmeņa noteikšanai.

    Datorizēta vadības sistēma paver plašas iespējas studentiem individualizēt mācību procesu. Adaptīvās pārbaudes pamatā ir mācīšanās individualizācijas princips. Adaptīvā pārbaude ir vadīkla, kas ļauj pielāgot katram skolēnam izvirzīto uzdevumu sarežģītību un skaitu atkarībā no viņa atbildes uz iepriekšējo uzdevumu: pareizas atbildes gadījumā skolēns saņems grūtāku nākamo uzdevumu, ja nepareizas atbildes gadījumā uzdevums ir vieglāks nekā iepriekšējais. Adaptīvās testēšanas režīms (un ne tikai testēšana, bet arī apmācība) ietver uzdevumu kopumu testa formā, liekot studentam strādāt līdz savu iespēju robežai un tādējādi nodrošināt maksimālais efekts. Skolēna sagatavotības līmenim atbilstošu uzdevumu izmantošana adaptīvajā testēšanā palielina mērījumu precizitāti un samazina individuālās pārbaudes laiku.

    Balstoties uz adaptīvās testēšanas rezultātu analīzi, ir iespējams veidot mācību procesu no uz personību orientētas pieejas perspektīvas, t.i., izvēlēties katram skolēnam optimālā grūtības pakāpes izglītības uzdevumus. Ir zināms, ka vieglie uzdevumi neveicina attīstību, bet sarežģītie samazina mācību motivāciju. Tāpēc optimālais grūtības līmenis 4 uzdevumi testoloģijā tiek uzskatīti par 50%.

    Izglītības datorizācija un pedagoģisko mērījumu teorijas attīstība ļauj izveidot vērtēšanas kontroles sistēmu objektīvākai un precīzākai skolēnu zināšanu, prasmju un iemaņu novērtēšanai. Mācību vērtēšanas vērtējums ļauj ar augstu ticamības pakāpi raksturot studenta sagatavotības kvalitāti konkrētajā mācību priekšmetā. "Vērtējums" tulkojumā no angļu valodas ir novērtējums, kvalitatīva jēdziena noteikta skaitliska īpašība. Parasti vērtējumu saprot kā “kumulatīvo punktu skaitu” vai punktu skaitu, kurā ņemta vērā “aizvēsture”.

    Moduļu apmācībai nepieciešama stingra strukturēšana izglītojoša informācija, apmācību saturs un studentu darba organizācija ar pabeigtiem, loģiski aizpildītiem izglītības blokiem (moduļiem). Moduļa saturs sakrīt ar akadēmiskā priekšmeta apguves tēmu. Piemēram, modulis tēmas “Anglijas un Amerikas ģeogrāfija” apguvei. Taču atšķirībā no tēmas modulī tiek mērīts, viss tiek vērtēts: katra uzdevuma izpilde, darbs stundā, nodarbību apmeklējums, skolēnu sagatavošanas sākuma, starpposma un beigu līmeņi. Modulis skaidri definē šī moduļa mācību mērķus, uzdevumus un mācību līmeņus, kā arī nosauc prasmes un iemaņas.

    Modulārās apmācības laikā studentiem vienmēr jāzina katra konkrētā moduļa pamatjēdzienu, prasmju un iemaņu saraksts, tostarp kvantitatīvs mācību materiāla kvalitātes novērtēšanas rādītājs. Pamatojoties uz šo sarakstu, tiek sastādīti jautājumi un apmācību uzdevumi, kas aptver visus moduļa darba veidus, un pēc moduļa apguves tiek iesniegti kontrolei. Kā likums, iekšā modulārā tehnoloģija apmācību, tiek izmantota pārbaudes forma.

    Apmācību moduļus un pārbaudes darbus var viegli pārnest uz datorizētu mācību vidi. Daudzi Krievijas iestādes Tālmācības sniedzēji veido savas mācību programmas, pamatojoties uz moduļiem.

    Moduļu apmācībā katrs uzdevums tiek novērtēts ballēs, tiek noteikts tā vērtējums un termiņi (arī uzdevuma savlaicīgu izpildi vērtē ar atbilstošu punktu skaitu), t.i., galvenais reitingu kontroles princips ir zināšanu kvalitātes kontrole un vērtēšana. , prasmes un iemaņas, ņemot vērā skolēnu sistemātisko darbu .

    Pēc apmācību pabeigšanas, pamatojoties uz moduļu vērtējumiem, tiek noteikts kopējais vērtējums, kas tiek ņemts vērā, nosakot mācību priekšmeta gala kontroles rezultātus.

    Tātad datoru testēšana kopā ar apmācību mūsdienās ir viena no galvenajām jauno informācijas tehnoloģiju metodēm svešvalodu prasmes līmeņa novērtēšanai.

    Notiek ielāde...Notiek ielāde...