• Tehnologija

Orodja za ocenjevanje z umetno inteligenco: Kako umetna inteligenca spreminja ocenjevanje in delovne tokove učiteljev

  • Felix Rose-Collins
  • ••
  • 5 min read

Uvod

AI grader for teachers showing a grading queue with essays reviewed and ready for teacher approval

Ko učitelj določi nalogo za pisanje eseja, se pravo delo začne šele potem, ko ga učenci oddajo. Razred s tridesetimi učenci, od katerih vsak napiše 800 besed, pomeni okoli 24.000 besed za branje, večina učiteljev pa ima več razredov. Vsako delo je treba pozorno prebrati, oceniti vsak del po ocenjevalnih merilih in dodati komentarje, ki so smiselni za učenca, ki ga je napisal. Ta proces se pogosto razteza čez cel teden večernih ur, in ko se dela vrnejo, so učenci že prešli na naslednjo temo. Strošek ni le učiteljev čas. Je tudi izgubljena priložnost za učence, da se učijo iz povratnih informacij, dokler je naloga še sveža v njihovih spominih.

Zakaj delovna obremenitev vpliva na to, kaj se dodeli

Učitelji so praktični ljudje, in velika obremenitev z ocenjevanjem tiho spreminja način poučevanja pisanja. Mnogi pedagogi priznavajo, da določijo manj obsežnih esejev, kot bi si želeli, preprosto zato, ker ne morejo ocenjevati več, ne da bi pri tem izgubili svoje vikende. Osnutki se preskočijo, vaje za pisanje ostanejo neocenjene, povratne informacije pa postajajo krajše, ko se kup nalog veča. Nichts od tega ne odraža pomanjkanja skrbi. Odraža omejitve časa ene osebe. Vsako orodje, ki olajša ta pritisk, ima neposreden vpliv na to, koliko pisanja učenci dejansko opravijo, zato je podpora pri ocenjevanju postala tako pogosta tema v zbornicah.

Kaj AI-ocenjevalec odvzame učitelju

Ocenjevalnik z umetno inteligenco prevzame najbolj časovno zahteven del ocenjevanja: podrobno prvo branje. V celoti prebere vsak esej, ga primerja z učiteljevim ocenjevalnim ključem ter pripravi oceno in pisne komentarje za vsako merilo. Učitelj nato pregleda ta osnutek, popravi vse, kar se ne ujema z njegovo presojo, in študentu posreduje končno različico. Z drugimi besedami, orodje opravi branje in prvi krog zapisovanja opomb, medtem ko učitelj ohrani odgovornost za vsako odločitev, ki jo prejme učenec. Razlika je v tem, da učitelj začne z organiziranimi povratnimi informacijami namesto s prazno stranjo.

Teden ocenjevanja pred in po

Najlažji način, da si predstavljamo to spremembo, je primerjava dveh različic istega tedna. Brez podpore bi učitelj morda porabil ponedeljek in torek za branje, sredo in četrtek za pisanje komentarjev, petek pa za nadoknadi, pri čemer bi naloge vrnil z zamudo. Ker je prvo branje opravljeno samodejno, lahko ponedeljek porabi za pregled že pripravljenih povratnih informacij, torek za prilagajanje ocen in sredo za vračanje nalog. Preostanek tedna je na voljo za pogovore o pisanju in čas za popravke. Konkreten urnik se bo razlikoval za vsakega učitelja, vendar je prav prehod od branja k pregledovanju tisti, kjer se čas sprosti.

comparison of a teacher's grading week with and without an AI grader, showing earlier feedback and time for writing conferences

Priprava ocenjevalne lestvice pred prvo serijo

Orodje lahko sledi le merilom, ki so mu dana, zato je vredno posvetiti nekaj minut pozornosti rubriki pred prvo serijo esejev. Jasna merila, opisana v preprostem jeziku za vsako raven uspešnosti, vodijo do jasnih povratnih informacij. Meglene fraze, kot je »dobra analiza«, povzročajo enako megle komentarje. Učitelji, ki že imajo ocenjevalno lestvico za določeno nalogo, jo običajno lahko uporabijo takšno, kot je, morda le z natančnejšim opredeljevanjem enega ali dveh opisov. Tisti, ki začenjajo z nič, lahko prilagodijo že pripravljeno ocenjevalno lestvico za zadevno vrsto eseja ali pa jo ustvarijo na podlagi kratkega opisa naloge, nato pa jo uredijo tako, da ustreza vsebini, ki je bila obravnavana v razredu.

Pregled povratnih informacij namesto pisanja od začetka

V fazi pregleda je strokovno znanje učitelja najbolj pomembno. Namesto da bi vsak esej prebral brez predhodnega vpogleda, ga učitelj prebere skupaj z osnutkom povratnih informacij in preveri, ali vsaka ocena in komentar držita. Komentarji, ki so točni, lahko ostanejo takšni, kot so. Komentarje, ki napačno razlagajo pomen učenčevega besedila, je mogoče v nekaj sekundah urediti ali odstraniti. Učitelji pogosto ugotavljajo, da je takšno pregledovanje manj naporno kot pisanje vsakega komentarja iz nič, saj je struktura že vzpostavljena in se lahko pozornost usmeri na točke, ki resnično zahtevajo strokovno presojo.

Kje še vedno prevlada učiteljeva presoja

Obstajajo deli ocenjevanja, ki jih nobeno orodje ne sme prevzeti, zato je dobro, da so ti že od začetka jasno opredeljeni:

  • Določanje končne ocene za vsako nalogo, zlasti v mejnih primerih
  • Priznavanje napredka študenta skozi celoten semester in nagrajevanje resničnega izboljšanja
  • Razumevanje, kdaj je neobičajna izbira namerna in učinkovita, namesto da bi bila napaka
  • Upoštevanje individualnih učnih potreb in okoliščin
  • Vodenje nadaljnjega pogovora s študentom o njegovem pisanju

Comparison of roles in AI-assisted grading, with the AI grader handling the first read and the teacher deciding final grades

Doslednost od prvega do zadnjega eseja

Celo izkušeni učitelji trideseti esej ocenijo nekoliko drugače kot prvega. Utrujenost, vrstni red nalog in kakovost esejev, ki so bili ocenjeni tik pred tem, lahko vplivajo na višino ocene. Uporaba istega ocenjevalnega ključa na enak način za vsak esej zmanjša to odstopanje. Učiteljovo pregledovanje postane tako preverjanje pravičnosti namesto vsakič nove presoje, kar olajša prepoznavanje resničnih razlik med učenci. Za oddelke, ki uporabljajo skupna merila ocenjevanja, ta doslednost pomaga tudi različnim učiteljem, da za podobno delo podajo podobne ocene.

Ponovna vključitev osnutkov in vajnih esejev v načrt

Ko se obremenitev z ocenjevanjem zmanjša, postane pisanje brez visokih zahtev spet izvedljivo. Učitelji lahko zberejo osnutke in dajo povratne informacije še pred končnim rokom, tako da učenci popravljajo z jasnimi navodili namesto z ugibanjem. Vaje v pisanju z omejenim časom, ki pogosto ostanejo neocenjene, lahko prejmejo komentarje na ravni meril, ki učencem pomagajo videti njihov napredek. Prav tu ima ocenjevanje z umetno inteligenco nekatere od svojih največjih učinkov na učenje, saj se pisanje izboljšuje skozi ponavljajoče se cikle poskusov, prejemanja povratnih informacij in ponovnih poskusov, ti cikli pa so odvisni od hitrega prejemanja povratnih informacij.

Začnite z enim razredom in eno nalogo

Najbolj nemoten način za uvedbo ocenjevanja z umetno inteligenco je, da začnete v majhnem obsegu. Preprost poskus običajno poteka takole:

  • Izberite en razred in eno prihajajočo nalogo za pisanje eseja
  • Naložite ocenjevalno lestvico, ki jo že uporabljate, in pojasnite morebitne nejasne opise ravni
  • Najprej sami ocenite nekaj esejev, nato pa iste eseje preverite s pomočjo orodja
  • Primerjajte svoje ocene in komentarje z osnutkom povratnih informacij
  • Ugotovite, kje se strinjate, kje se razlikujete in koliko popravkov je bilo potrebnih

Učitelji, ki želijo to preizkusiti, lahko začnejo na spletni strani clasa.ai, ki eseje ocenjuje na podlagi izbrane rubrike in za vsako merilo vrne povratne informacije, ki jih je mogoče urediti. Po eni ali dveh nalogah ima večina učiteljev jasno predstavo o tem, kje orodje prihrani čas in koliko pregledovanja potrebujejo njihovi razredi.

Vprašanja o natančnosti in pravičnosti

Učitelji se upravičeno sprašujejo, ali je mogoče zaupati avtomatiziranim povratnim informacijam. Iskren odgovor je, da jih je treba preveriti, ne pa kar predpostavljati. Natančnost je v veliki meri odvisna od kakovosti ocenjevalnih meril in jasnosti naloge, rezultati pa se izboljšajo, če sta oba dobro opredeljena. Pregled vsakega eseja pred objavo ščiti učence pred napakami, beleženje opomb o tem, kje se orodje ponavadi strinja ali ne strinja z vašo presojo, pa vam pomaga odločiti, kako natančno boste pregledovali v prihodnje. Pri takšni uporabi ocenjevanje z umetno inteligenco podpira pravičnost z enakomerno uporabo meril, medtem ko učitelj ščiti pred napakami.

Obravnavanje prispevkov, ki jih je napisala umetna inteligenca

O istih orodjih, ki učiteljem pomagajo pri ocenjevanju, se pogosto sprašuje tudi v zvezi z nasprotnim problemom: učenci, ki za pisanje esejev uporabljajo klepetalne robote. Mnoga orodja za ocenjevanje vključujejo preverjanje pisanja z umetno inteligenco, ki označi odstavke, ki izgledajo, kot da jih je ustvaril računalnik. To je lahko koristen signal, vendar ni dokaz. Formalno ali šablonsko pisanje se včasih lahko po pomoti označi, zato je označen odstavek najbolje obravnavati kot razlog za pogovor z učencem, prošnjo za prejšnje osnutke ali primerjavo dela s pisanjem, opravljenim v razredu, in ne kot podlago za samodejno kaznovanje.

Razlaga postopka učencem in družinam

Preglednost pomaga vsem sprejeti nov pristop. Učenci morajo vedeti, da orodje pripravi prvi osnutek povratnih informacij, da njihov učitelj pregleda vsak rezultat in da končno oceno še vedno določi učitelj. Družine se običajno dobro odzovejo, ko vidijo, da sprememba pomeni hitrejše in podrobnejše povratne informacije, ne pa manjše vključevanje učitelja. Vzorec poročila s povratnimi informacijami, objavljen v glasilu ali na roditeljskem sestanku, običajno odgovori na večino vprašanj, še preden so zastavljena, in natančno prikaže, kaj bodo učenci prejeli.

Kaj učitelji počnejo s časom, ki ga pridobijo

Vrednost ocenjevalca z umetno inteligenco se pokaže v tem, kar sledi po končanem ocenjevanju. Nekateri učitelji izkoriščajo pridobljene ure za individualne pogovore o pisanju, kjer lahko petminutni pogovor prinese več kot stran komentarjev. Drugi dodajo dodatno fazo osnutka pri večjih nalogah ali izvajajo seje medvrstniškega pregleda z uporabo istega ocenjevalnega ključa. Nekateri si preprosto ponovno prisvojijo večere in vikende, kar je pomembno za dolgoročno ostajanje v poklicu. V vsakem primeru se čas preusmerja stran od ponavljajočega branja in k tistim delom poučevanja, ki so odvisni od človeškega odnosa z učenci.

Felix Rose-Collins

Felix Rose-Collins

Ranktracker's CEO/CMO & Co-founder

Felix Rose-Collins is the Co-founder and CEO/CMO of Ranktracker. With over 15 years of SEO experience, he has single-handedly scaled the Ranktracker site to over 500,000 monthly visits, with 390,000 of these stemming from organic searches each month.

Začnite uporabljati Ranktracker... brezplačno!

Ugotovite, kaj preprečuje uvrstitev vašega spletnega mesta.

Ustvarite brezplačen račun

Ali se prijavite s svojimi poverilnicami

Different views of Ranktracker app