• Technologijos

Dirbtinio intelekto vertinimo įrankiai: kaip dirbtinis intelektas keičia vertinimą ir mokytojų darbo procesus

  • Felix Rose-Collins
  • ••
  • 5 min read

Įvadas

AI grader for teachers showing a grading queue with essays reviewed and ready for teacher approval

Kai mokytojas užduoda rašinio užduotį, tikrasis darbas prasideda po to, kai mokiniai jį atiduoda. Trisdešimties mokinių klasė, kurioje kiekvienas parašo po 800 žodžių, sudaro apie 24 000 žodžių, kuriuos reikia perskaityti, o dauguma mokytojų turi keletą klasių. Kiekvieną darbą reikia atidžiai perskaityti, įvertinti pagal kiekvieną vertinimo kriterijų ir pateikti komentarus, kurie būtų suprantami jį parašiusiam mokiniui. Šis procesas dažnai užtrunka visą savaitę vakarais, o kai darbai grąžinami, mokiniai jau yra perėję prie kitos temos. Tai kainuoja ne tik mokytojo laiką. Tai taip pat yra prarasta galimybė mokiniams pasimokyti iš grįžtamojo ryšio, kol užduotis dar yra šviežia jų atmintyje.

Kodėl darbo krūvis lemia, kokios užduotys skiriamos

Mokytojai yra praktiški žmonės, o didelė vertinimo našta tyliai keičia rašymo mokymo būdus. Daugelis pedagogų prisipažįsta, kad skiria mažiau išsamių rašinių, nei norėtų, tiesiog todėl, kad negali vertinti daugiau, neprarandant savaitgalių. Juodraščiai praleidžiami, praktiniai rašiniai lieka neįvertinti, o atsiliepimai tampa trumpesni, kai krūva auga. Nė viena iš šių aplinkybių neatspindi rūpesčio trūkumo. Tai atspindi vieno žmogaus laiko ribotumą. Bet koks įrankis, kuris palengvina tą spaudimą, turi tiesioginį poveikį tam, kiek rašymo užduočių mokiniai iš tikrųjų atlieka, todėl pagalba vertinant tapo tokia dažna tema mokytojų kambariuose.

Ką dirbtinio intelekto vertintojas perima iš mokytojo

AI vertintojas atlieka labiausiai laiko reikalaujančią vertinimo dalį: išsamų pirmąjį perskaitymą. Jis perskaito kiekvieną rašinį nuo pradžios iki galo, palygina jį su mokytojo vertinimo kriterijais ir parengia balą bei rašytinius komentarus pagal kiekvieną kriterijų. Tada mokytojas peržiūri tą projektą, pakoreguoja viską, kas neatitinka jo vertinimo, ir pateikia galutinę versiją mokiniui. Kitaip tariant, įrankis atlieka skaitymą ir pirmąjį pastabų darymo etapą, o mokytojas lieka atsakingas už kiekvieną sprendimą, kurį gauna mokinys. Skirtumas tas, kad mokytojas pradeda nuo sistemingų atsiliepimų, o ne nuo tuščio lapo.

Vertinimo savaitė prieš ir po

Paprasčiausias būdas įsivaizduoti šį pokytį – palyginti dvi tos pačios savaitės versijas. Be pagalbos mokytojas pirmadienį ir antradienį galėtų praleisti skaitydamas, trečiadienį ir ketvirtadienį – rašydamas komentarus, o penktadienį – bandydamas suspėti, kai darbai grąžinami pavėluotai. Kai pirmasis skaitymas atliekamas automatiškai, pirmadienį galima peržiūrėti paruoštą grįžtamąją informaciją, antradienį – pakoreguoti balus, o trečiadienį – grąžinti darbus. Likusi savaitės dalis lieka laisva rašymo konsultacijoms ir perrašymui. Konkretus tvarkaraštis kiekvienam mokytojui bus skirtingas, tačiau būtent perėjimas nuo skaitymo prie peržiūros leidžia sutaupyti laiko.

comparison of a teacher's grading week with and without an AI grader, showing earlier feedback and time for writing conferences

Vertinimo kriterijų nustatymas prieš pirmąją rašinių partiją

Įrankis gali vadovautis tik jam pateiktais kriterijais, todėl prieš pirmąjį rašinių rinkinį vertėtų skirti keletą minučių vertinimo skalės parengimui. Aiškūs kriterijai, paprasta kalba aprašyti kiekvienam pasiekimų lygiui, užtikrina aiškius atsiliepimus. Neaiškios frazės, pavyzdžiui, „gera analizė“, sukelia lygiai tokius pat neaiškius komentarus. Mokytojai, kurie jau turi užduoties vertinimo lentelę, paprastai gali ją naudoti tokią, kokia yra, galbūt patikslinę vieną ar du aprašymus. Tie, kurie pradeda nuo nulio, gali pritaikyti parengtą vertinimo lentelę konkrečiam rašinio tipui arba sukurti ją remdamiesi trumpu užduoties aprašymu, o tada redaguoti, kad ji atitiktų tai, kas buvo mokoma pamokose.

Atsiliepimų peržiūra, o ne rašymas nuo nulio

Peržiūros etapas yra tas, kuriame mokytojo kompetencija yra svarbiausia. Vietoj to, kad skaitytų kiekvieną rašinį „iš naujo“, mokytojas jį skaito kartu su parengtu grįžtamuoju ryšiu, tikrindamas, ar kiekvienas balas ir komentaras yra pagrįstas. Komentarai, kurie yra tikslūs, gali likti tokie, kokie yra. Komentarai, kuriuose klaidingai suprasta mokinio mintis, gali būti per kelias sekundes pataisyti arba pašalinti. Mokytojai dažnai pastebi, kad toks peržiūrėjimas yra mažiau varginantis nei kiekvieno komentaro rašymas nuo nulio, nes struktūra jau yra sukurta ir dėmesį galima skirti tiems aspektams, kuriems iš tiesų reikalingas profesionalus vertinimas.

Kur vis dar reikalingas mokytojo vertinimas

Yra vertinimo aspektų, kurių jokia priemonė neturėtų perimti, ir naudinga juos aiškiai apibrėžti nuo pat pradžių:

  • Galutinio pažymio nustatymas kiekvienam darbui, ypač ribiniams atvejams
  • Studento pažangos per semestrą pripažinimas ir tikro tobulėjimo įvertinimas
  • Supratimas, kada neįprastas pasirinkimas yra sąmoningas ir veiksmingas, o ne klaida
  • Atsižvelgimas į individualius mokymosi poreikius ir aplinkybes
  • Tolesnio pokalbio su studentu apie jo rašymą vedimas

Comparison of roles in AI-assisted grading, with the AI grader handling the first read and the teacher deciding final grades

Nuoseklumas nuo pirmojo iki paskutinio darbo

Net patyrę mokytojai trisdešimtąjį rašinį vertina šiek tiek kitaip nei pirmąjį. Nuovargis, darbų eiliškumas ir prieš tai vertinto rašinio kokybė – visa tai gali šiek tiek pakelti arba sumažinti balą. Taikant tą pačią vertinimo skalę vienodai kiekvienam rašiniui, šis nuokrypis sumažėja. Tuomet mokytojo vertinimas tampa teisingumo patikrinimu, o ne kiekvieną kartą nauju sprendimu, todėl lengviau įžvelgti tikruosius skirtumus tarp mokinių. Katedroms, kurios taiko bendrus vertinimo kriterijus, šis nuoseklumas taip pat padeda skirtingiems mokytojams skirti panašius balus už panašius darbus.

Esė juodraščių ir praktinių rašinių grąžinimas į planą

Kai vertinimo krūvis sumažėja, vėl tampa įmanoma skirti užduotis, kurių rezultatai neturi didelės reikšmės. Mokytojai gali surinkti rašymo juodraščius ir pateikti atsiliepimus iki galutinio termino, kad mokiniai galėtų taisyti darbus remdamiesi aiškiais nurodymais, o ne spėliodami. Laiko ribojami praktiniai rašymo darbai, kurie dažnai lieka neįvertinti, gali būti papildyti kriterijais pagrįstais komentarais, padedančiais mokiniams įvertinti savo pažangą. Būtent čia dirbtinio intelekto vertinimas daro vieną didžiausių poveikių mokymuisi, nes rašymo įgūdžiai tobulėja per pasikartojančius bandymų, atsiliepimų gavimo ir naujų bandymų ciklus, o šie ciklai priklauso nuo greitai gaunamų atsiliepimų.

Pradėkite nuo vienos klasės ir vienos užduoties

Sklandžiausias būdas įvesti AI vertinimą – pradėti nuo mažų žingsnių. Paprastas bandymas paprastai atrodo taip:

  • Pasirinkite vieną klasę ir vieną artėjantį rašinio užduotį
  • Įkelkite jau naudojamą vertinimo lentelę, patikslinant neaiškius lygių aprašymus
  • Pirmiausia patys įvertinkite keletą rašinių, tada tuos pačius rašinius įkelkite į vertinimo įrankį
  • Palyginkite savo balus ir komentarus su parengtu grįžtamuoju ryšiu
  • Atkreipkite dėmesį, kur sutinkate, kur nesutinkate ir kiek redagavimo reikėjo

Mokytojai, norintys tai išbandyti, gali pradėti naudotis „clasa.ai“ – šis įrankis vertina rašinius pagal pasirinktą vertinimo skalę ir pateikia redaguojamą grįžtamąjį ryšį pagal kiekvieną kriterijų. Po vienos ar dviejų užduočių dauguma mokytojų aiškiai supranta, kur šis įrankis padeda sutaupyti laiko ir kiek peržiūros reikia jų pačių klasėms.

Tikslumo ir teisingumo klausimai

Mokytojai pagrįstai klausia, ar galima pasitikėti automatizuotu grįžtamuoju ryšiu. Sąžiningas atsakymas yra toks: tai reikėtų patikrinti, o ne laikyti savaime suprantamu dalyku. Tikslumas labai priklauso nuo vertinimo kriterijų kokybės ir užduoties aiškumo, o rezultatai gerėja, kai abu šie aspektai yra gerai apibrėžti. Kiekvieno rašinio peržiūra prieš paskelbimą apsaugo mokinius nuo klaidų, o užrašų darymas apie tai, kur įrankis paprastai sutinka arba nesutinka su jūsų vertinimu, padeda nuspręsti, kaip atidžiai reikės tikrinti ateityje. Taikoma tokiu būdu, AI vertinimas užtikrina teisingumą, vienodai taikydamas kriterijus, o mokytojas apsaugo nuo klaidų.

Kaip elgtis su AI parašytais darbais

Tos pačios priemonės, kurios padeda mokytojams vertinti darbus, dažnai kelia klausimą dėl priešingos problemos: mokinių, naudojančių pokalbių robotus rašydami savo rašinius. Daugelis vertinimo programų turi AI rašymo patikrinimo funkciją, kuri paryškina ištraukas, atrodančias kaip sukurtas mašinos. Tai gali būti naudingas signalas, tačiau tai nėra įrodymas. Formalus ar šabloniškas rašymo stilius kartais gali būti pažymėtas per klaidą, todėl paryškintą ištrauką geriausia traktuoti kaip priežastį pasikalbėti su mokiniu, paprašyti ankstesnių juodraščių arba palyginti darbą su klasėje parašytu tekstu, o ne kaip pagrindą automatiškai skirti nuobaudą.

Proceso paaiškinimas mokiniams ir šeimoms

Skaidrumas padeda visiems priimti naują požiūrį. Mokiniai turėtų žinoti, kad pirminę atsiliepimo versiją parengia įrankis, kad mokytojas peržiūri kiekvieną rezultatą ir kad galutinį pažymį vis tiek nustato mokytojas. Šeimos paprastai reaguoja teigiamai, kai supranta, kad šis pokytis reiškia greitesnį ir išsamesnį grįžtamąjį ryšį, o ne mažesnį mokytojo įsitraukimą. Pavyzdinė atsiliepimo ataskaita, paskelbta naujienlaiškyje ar tėvų susirinkime, paprastai atsako į daugumą klausimų dar prieš juos užduodant ir tiksliai parodo, ką mokiniai gaus.

Kaip mokytojai panaudoja sutaupytą laiką

Dirbtinio intelekto vertinimo programos vertė atsiskleidžia po to, kai vertinimas baigtas. Kai kurie mokytojai sutaupytą laiką skiria individualiems pokalbiams apie rašymą, kur penkių minučių pokalbis gali duoti daugiau naudos nei puslapis komentarų. Kiti įtraukia papildomą juodraščio etapą į pagrindinius darbus arba rengia tarpusavio vertinimo sesijas, naudodami tą pačią vertinimo skalę. Kai kurie tiesiog susigrąžina vakarus ir savaitgalius, o tai svarbu norint ilgai išlikti šioje profesijoje. Bet kuriuo atveju laikas skiriamas nebe pasikartojančiam skaitymui, o toms mokymo dalims, kurios priklauso nuo žmogiškųjų santykių su mokiniais.

Felix Rose-Collins

Felix Rose-Collins

Ranktracker's CEO/CMO & Co-founder

Felix Rose-Collins is the Co-founder and CEO/CMO of Ranktracker. With over 15 years of SEO experience, he has single-handedly scaled the Ranktracker site to over 500,000 monthly visits, with 390,000 of these stemming from organic searches each month.

Pradėkite naudoti "Ranktracker"... nemokamai!

Sužinokite, kas trukdo jūsų svetainei užimti aukštesnes pozicijas.

Sukurti nemokamą paskyrą

Arba Prisijunkite naudodami savo įgaliojimus

Different views of Ranktracker app