• Tehnoloogia

Tehisintellekti hindamisvahendid: kuidas tehisintellekt muudab hindamist ja õpetajate töövooge

  • Felix Rose-Collins
  • ••
  • 5 min read

Sissejuhatus

AI grader for teachers showing a grading queue with essays reviewed and ready for teacher approval

Kui õpetaja annab ülesandeks essee kirjutamise, algab tõeline töö alles pärast seda, kui õpilased on oma tööd sisse andnud. Kui kolmekümnest õpilasest koosnev klass kirjutab igaüks 800 sõna, tekib lugemiseks umbes 24 000 sõna, ja enamikul õpetajatel on mitu klassi. Iga töö tuleb hoolikalt läbi lugeda, anda hinnang iga hindamiskriteeriumi osale ja kirjutada kommentaarid, mis on mõistetavad selle töö kirjutanud õpilasele. See protsess võtab sageli aega terve nädala õhtud, ja selleks ajaks, kui tööd tagasi antakse, on õpilased juba järgmise teemaga edasi liikunud. See ei tähenda ainult õpetaja aja kulutamist. See tähendab ka õpilaste kaotatud võimalust õppida tagasisidest, kui ülesanne on neil veel värskelt meeles.

Miks töökoormus mõjutab ülesannete valikut

Õpetajad on praktilised inimesed ja suur hindamiskoormus muudab vaikselt seda, kuidas kirjutamist õpetatakse. Paljud õpetajad tunnistavad, et nad annavad vähem pikemaid esseesid, kui nad sooviksid, lihtsalt seetõttu, et nad ei suuda rohkem hinnata ilma nädalavahetusi ohverdamata. Käsikirjad jäävad vahele, harjutustöid ei hinnata ja tagasiside muutub lühemaks, kui kuhja suureneb. See ei peegelda hoolimatust. See peegeldab ühe inimese aja piiratust. Iga vahend, mis seda survet leevendab, mõjutab otseselt seda, kui palju õpilased tegelikult kirjutavad, mistõttu on hindamise toetamine muutunud õpetajate toas nii levinud teemaks.

Mida tehisintellekti hindaja õpetaja töökoormusest ära võtab

Tehisintellekti hindaja tegeleb hindamise kõige aeganõudvama osaga: üksikasjaliku esmase läbilugemisega. See loeb iga essee tervikuna läbi, võrdleb seda õpetaja hindamiskriteeriumidega ning koostab iga kriteeriumi kohta hinde ja kirjaliku kommentaari. Seejärel vaatab õpetaja selle esialgse versiooni läbi, kohandab kõike, mis ei vasta tema hinnangule, ning edastab lõpliku versiooni õpilasele. Teisisõnu teeb tööriist läbilugemise ja esimese märkuste tegemise, samas kui õpetaja jääb vastutavaks iga otsuse eest, mis õpilaseni jõuab. Erinevus seisneb selles, et õpetaja alustab organiseeritud tagasisidest, mitte tühjast leheküljest.

Hindamisnädal enne ja pärast

Lihtsaim viis muutust ette kujutada on võrrelda sama nädala kahte versiooni. Ilma abita võib õpetaja veeta esmaspäeva ja teisipäeva lugemisele, kolmapäeva ja neljapäeva kommentaaride kirjutamisele ning reedet järelejõudmisele, mille tulemusena tagastatakse tööd hilinemisega. Kuna esimene lugemine toimub automaatselt, saab esmaspäeva veeta valmis tagasiside läbivaatamisele, teisipäeva hindete korrigeerimisele ja kolmapäeva tööde tagastamisele. Ülejäänud nädal jääb vabaks kirjutamisnõupidamisteks ja parandamiseks. Konkreetne ajakava on iga õpetaja puhul erinev, kuid just üleminek lugemiselt läbivaatamisele on see, mis annab aega tagasi.

comparison of a teacher's grading week with and without an AI grader, showing earlier feedback and time for writing conferences

Hindamiskriteeriumide seadistamine enne esimest tööpartiid

Tööriist saab järgida ainult talle antud kriteeriume, seega tasub hindamisjuhendile enne esimest essee-partiid pühendada paar minutit tähelepanu. Selged kriteeriumid, mis on igal tulemustasemel lihtsas keeles kirjeldatud, annavad selget tagasisidet. Ebamäärased väljendid, nagu „hea analüüs”, toovad kaasa sama ebamäärased kommentaarid. Õpetajad, kellel on ülesande jaoks juba hindamiskriteeriumid olemas, saavad neid tavaliselt kasutada sellisena, nagu need on, ehk täpsustades üht-teist kirjeldust. Need, kes alustavad nullist, võivad kohandada valmis hindamiskriteeriumeid vastavalt essee tüübile või luua need ülesande lühikirjelduse põhjal ning seejärel neid redigeerida, et need vastaksid klassis õpetatule.

Tagasiside läbivaatamine selle asemel, et seda nullist kirjutada

Läbivaatamise etapis on õpetaja asjatundlikkus kõige olulisem. Selle asemel, et lugeda iga esseed esmakordselt läbi, loeb õpetaja seda koos koostatud tagasisidega, kontrollides, kas iga hinne ja kommentaar peab paika. Täpsed kommentaarid võivad jääda muutmata. Kommentaarid, mis on õpilase mõtet valesti tõlgendanud, saab sekunditega muuta või eemaldada. Õpetajad leiavad sageli, et selline läbivaatamine on vähem väsitav kui iga kommentaari nullist kirjutamine, sest struktuur on juba olemas ja tähelepanu saab suunata punktidele, mis tõepoolest vajavad professionaalset hinnangut.

Kus õpetaja otsustusvõime ikkagi otsustav on

Hindamisel on osi, mida ükski tööriist ei tohiks üle võtta, ja on kasulik neid algusest peale selgelt teadvustada:

  • Iga töö lõpphinde määramine, eriti piirijuhtudel
  • Õpilase edusammude tunnustamine semestri jooksul ja tegeliku arengu premeerimine
  • Mõistmine, millal ebatavaline valik on teadlik ja tõhus, mitte viga
  • Individuaalsete õpivajaduste ja asjaolude arvessevõtmine
  • Järgneva vestluse pidamine õpilasega tema kirjutamise teemal

Comparison of roles in AI-assisted grading, with the AI grader handling the first read and the teacher deciding final grades

Järjepidevus esimesest tööst viimase töön

Isegi kogenud õpetajad hindavad kolmekümnendat esseed veidi teistmoodi kui esimest. Väsimus, tööde järjekord ja vahetult eelneva essee kvaliteet võivad kõik mõjutada hinde tõusu või langust. Sama hindamisjuhendi ühtmoodi kohaldamine iga essee puhul vähendab seda kõikumist. Õpetaja hindamine muutub sel juhul pigem õigluse kontrolliks kui iga kord uueks otsuseks, mis muudab õpilaste vaheliste tegelike erinevuste märkamise lihtsamaks. Osakondades, kus kasutatakse ühiseid hindamiskriteeriume, aitab see järjepidevus ka erinevatel õpetajatel anda sarnastele tööle sarnaseid hindeid.

Esialgsete versioonide ja harjutustööde taasplaanimisse kaasamine

Kui hindamiskoormus väheneb, muutub madala panusega kirjutamine taas realistlikuks. Õpetajad saavad koguda esialgseid käsikirju ja anda tagasisidet enne lõpptähtaega, nii et õpilased saavad oma töid parandada selgete juhiste alusel, mitte oletuste põhjal. Ajaliselt piiratud harjutustööd, mida sageli ei hinnata, võivad saada kriteeriumipõhiseid kommentaare, mis aitavad õpilastel näha oma edusamme. Just siin avaldab tehisintellekti abil hindamine õppimisele üht oma suurimat mõju, sest kirjutamisoskus paraneb korduvate tsüklite kaudu, kus proovitakse, saadakse tagasisidet ja proovitakse uuesti, ning need tsüklid sõltuvad tagasiside kiirest saabumisest.

Alustamine ühe klassi ja ühe ülesandega

Kõige sujuvam viis AI-hindamise kasutuselevõtuks on alustada väikestest sammudest. Lihtne katse näeb tavaliselt välja järgmiselt:

  • Valige üks klass ja üks eelseisev esseeülesanne
  • Laadige üles juba kasutatav hindamiskriteeriumide tabel, täpsustades ebamääraseid tasemete kirjeldusi
  • Hinda esmalt ise mõned esseed, seejärel lase need sama tööriista kaudu läbi
  • Võrdle oma hindeid ja kommentaare tööriista poolt koostatud tagasisidega
  • Märkige ära, millistes punktides olete nõus, millistes eriarvamusel ja kui palju redigeerimist oli vaja

Õpetajad, kes soovivad seda proovida, võivad alustada veebisaidil clasa.ai, mis hindab esseesid valitud hindamiskriteeriumide alusel ja annab iga kriteeriumi kohta redigeeritavat tagasisidet. Pärast ühte või kahte ülesannet on enamikul õpetajatel selge arusaam sellest, kus tööriist aega säästab ja kui palju läbivaatamist nende enda klassid vajavad.

Täpsuse ja õigluse küsimused

Õpetajad küsivad õigustatult, kas automatiseeritud tagasisidele saab usaldada. Aus vastus on, et seda tuleks kontrollida, mitte eeldada. Täpsus sõltub suuresti hindamiskriteeriumide kvaliteedist ja ülesande selgusest ning tulemused paranevad, kui mõlemad on hästi määratletud. Iga essee läbivaatamine enne avaldamist kaitseb õpilasi vigade eest ning märkuste tegemine selle kohta, millistes kohtades tööriist teie hinnanguga nõustub või ei nõustu, aitab teil otsustada, kui põhjalikult tuleks tulevikus töid läbi vaadata. Sellisel viisil kasutatuna toetab tehisintellekti hindamine õiglust, kohaldades kriteeriume ühtlaselt, samal ajal kui õpetaja kaitseb õpilasi vigade eest.

Tehisintellekti poolt kirjutatud tööde käsitlemine

Sama tööriista, mis aitab õpetajatel hindeid anda, seoses küsitakse sageli ka vastupidise probleemi kohta: õpilased kasutavad essee kirjutamiseks chatbote. Paljud hindamisvahendid sisaldavad tehisintellekti kirjutamise kontrolli, mis tõstab esile lõigud, mis näevad välja masinaga loodud. See võib olla kasulik märk, kuid see ei ole tõend. Ametlikku või šabloonilist kirjutamist võidakse mõnikord ekslikult märgistada, seega on esile tõstetud lõiku kõige parem käsitleda põhjusena õpilasega rääkida, küsida varasemaid kavandeid või võrrelda tööd klassis valminud kirjutisega, mitte aga automaatse karistuse alusena.

Protsessi selgitamine õpilastele ja peredele

Läbipaistvus aitab kõigil uut lähenemisviisi aktsepteerida. Õpilased peaksid teadma, et esimese tagasiside eelnõu koostab tööriist, et õpetaja vaatab läbi iga tulemuse ja et lõplik hinne jääb õpetaja otsustada. Vanemad reageerivad üldjuhul hästi, kui nad näevad, et muutus tähendab kiiremat ja üksikasjalikumat tagasisidet, mitte õpetaja väiksemat kaasatust. Uudiskirjas või vanemate koosolekul jagatud näidistagasisidearuanne vastab tavaliselt enamikule küsimustele enne, kui need esitatakse, ja näitab täpselt, mida õpilased saavad.

Mida õpetajad teevad vabanenud ajaga

Tehisintellekti hindaja väärtus ilmneb selles, mis juhtub pärast hindamise lõppu. Mõned õpetajad kasutavad vabanenud aega üks-ühele kirjutamisnõustamiseks, kus viieminutiline vestlus võib anda rohkem kui terve lehekülg kommentaare. Teised lisavad suurematele ülesannetele täiendava kavandietapi või korraldavad sama hindamiskriteeriumide alusel õpilasvahelisi hindamissessioone. Mõned lihtsalt saavad tagasi oma õhtud ja nädalavahetused, mis on oluline, et pikaajaliselt selles ametis püsida. Igal juhul suunatakse aeg korduvast lugemisest õpetamise nendele osadele, mis sõltuvad inimlikust suhtest õpilastega.

Felix Rose-Collins

Felix Rose-Collins

Ranktracker's CEO/CMO & Co-founder

Felix Rose-Collins is the Co-founder and CEO/CMO of Ranktracker. With over 15 years of SEO experience, he has single-handedly scaled the Ranktracker site to over 500,000 monthly visits, with 390,000 of these stemming from organic searches each month.

Alusta Ranktracker'i kasutamist... Tasuta!

Uuri välja, mis takistab sinu veebisaidi edetabelisse paigutamist.

Loo tasuta konto

Või logi sisse oma volituste abil

Different views of Ranktracker app