• Teknologia

Tekoälypohjaiset arviointityökalut: Miten tekoäly muuttaa arviointia ja opettajien työnkulkuja

  • Felix Rose-Collins
  • ••
  • 4 min read

Johdanto

AI grader for teachers showing a grading queue with essays reviewed and ready for teacher approval

Kun opettaja antaa esseetehtävän, varsinainen työ alkaa vasta sen jälkeen, kun oppilaat ovat palauttaneet esseensä. Kolmenkymmenen oppilaan luokka, jossa jokainen kirjoittaa 800 sanaa, tuottaa noin 24 000 sanaa luettavaa, ja useimmilla opettajilla on useita luokkia. Jokainen essee vaatii huolellista lukemista, arvosanan jokaisesta arviointikriteeristä sekä kommentteja, jotka ovat merkityksellisiä sen kirjoittaneelle oppilaalle. Tämä prosessi venyy usein viikon mittaiseksi ilta-ajaksi, ja kun esseet palautetaan, oppilaat ovat jo siirtyneet seuraavaan aiheeseen. Hinta ei ole pelkästään opettajan aikaa. Se on myös menetetty mahdollisuus oppilaille oppia palautteesta, kun tehtävä on vielä tuoreena mielessä.

Miksi työmäärä vaikuttaa annettaviin tehtäviin

Opettajat ovat käytännönläheisiä ihmisiä, ja raskas arvostelutyö muuttaa hiljalleen sitä, miten kirjoittamista opetetaan. Monet opettajat myöntävät, että he antavat vähemmän laajempia esseitä kuin haluaisivat, yksinkertaisesti siksi, että he eivät voi arvostella enempää menettämättä viikonloppujaan. Luonnoksia jätetään väliin, harjoitusesseitä jää arvostelematta ja palaute lyhenee, kun pino kasvaa. Mikään tästä ei johdu huolimattomuudesta. Se heijastaa yhden ihmisen ajan rajallisuutta. Mikä tahansa työkalu, joka helpottaa tätä painetta, vaikuttaa suoraan siihen, kuinka paljon oppilaat todellisuudessa kirjoittavat, minkä vuoksi arvioinnin tuki on tullut niin yleiseksi aiheeksi opettajainhuoneissa.

Mitä tekoälyarvioija ottaa opettajan harteilta

Tekoälyarvioija hoitaa arvostelun aikaa vievimmän osan: yksityiskohtaisen ensimmäisen lukukerran. Se lukee jokaisen esseen kokonaan, vertaa sitä opettajan arviointitaulukkoon ja laatii pisteet sekä kirjalliset kommentit jokaisesta arviointikriteeristä. Opettaja tarkistaa sitten tämän luonnoksen, korjaa mahdolliset poikkeamat omasta arvioinnistaan ja lähettää lopullisen version opiskelijalle. Toisin sanoen työkalu hoitaa lukemisen ja ensimmäisen kierroksen muistiinpanojen tekemisen, kun taas opettaja säilyttää vastuun jokaisesta opiskelijalle välitettävästä päätöksestä. Ero on siinä, että opettaja aloittaa järjestetystä palautteesta tyhjän sivun sijaan.

Arviointiviikko ennen ja jälkeen

Helpoin tapa kuvitella muutosta on verrata kahta versiota samasta viikosta. Ilman tukea opettaja saattaisi viettää maanantain ja tiistain lukemiseen, keskiviikon ja torstain kommenttien kirjoittamiseen sekä perjantain jälkityöhön, jolloin työt palautetaan myöhässä. Kun ensimmäinen lukukerta hoidetaan automaattisesti, maanantai voidaan käyttää valmiiden palautteiden tarkasteluun, tiistai pisteiden tarkistamiseen ja keskiviikko töiden palauttamiseen. Loput viikosta vapautuu kirjoitusneuvotteluihin ja tekstien hiomiseen. Tarkka aikataulu vaihtelee opettajakohtaisesti, mutta juuri siirtyminen lukemisesta palautteen tarkasteluun vapauttaa aikaa.

comparison of a teacher's grading week with and without an AI grader, showing earlier feedback and time for writing conferences

Arviointitaulukon laatiminen ennen ensimmäistä erää

Työkalu voi noudattaa vain sille annettuja kriteerejä, joten arviointitaulukkoon kannattaa käyttää muutama minuutti aikaa ennen ensimmäistä esseerypästä. Selkeät kriteerit, jotka on kuvattu selkokielellä jokaisella suoritustasolla, johtavat selkeään palautteeseen. Epämääräiset ilmaukset, kuten ”hyvä analyysi”, tuottavat yhtä epämääräisiä kommentteja. Opettajat, joilla on jo arviointitaulukko tehtävää varten, voivat yleensä käyttää sitä sellaisenaan, ehkä tarkentamalla yhtä tai kahta kuvausta. Ne, jotka aloittavat tyhjästä, voivat mukauttaa valmiita arviointitaulukoita esseetyypin mukaan tai luoda oman lyhyen tehtävänkuvauksen pohjalta ja muokata sitä vastaamaan luokassa opetettua.

Palautteen tarkistaminen sen sijaan, että se kirjoitettaisiin alusta alkaen

Arviointivaiheessa opettajan asiantuntemus on tärkeimmillään. Sen sijaan, että opettaja lukisi jokaisen esseen kylmänä, hän lukee sen rinnalla luonnostellun palautteen ja tarkistaa, pitävätkö pisteet ja kommentit paikkansa. Tarkat kommentit voidaan jättää ennalleen. Kommentit, joissa oppilaan tarkoitus on tulkittu väärin, voidaan muokata tai poistaa muutamassa sekunnissa. Opettajat huomaavat usein, että tällainen tarkistaminen on vähemmän väsyttävää kuin jokaisen kommentin kirjoittaminen tyhjästä, koska rakenne on jo valmiina ja huomio voidaan keskittää niihin kohtiin, jotka todella vaativat ammatillista harkintaa.

Missä opettajan harkinta on edelleen tarpeen

Arvioinnissa on osia, joita mikään työkalu ei saisi ottaa hoitaakseen, ja on hyvä olla niistä selvillä alusta alkaen:

  • Lopullisen arvosanan määrittäminen jokaisesta esseestä, erityisesti rajatapauksissa
  • Opiskelijan edistymisen tunnustaminen lukukauden aikana ja todellisen kehityksen palkitseminen
  • Ymmärtää, milloin epätavallinen valinta on tarkoituksellinen ja tehokas eikä virhe
  • Yksilöllisten oppimistarpeiden ja olosuhteiden huomioon ottaminen
  • Jatkokeskustelun käyminen opiskelijan kanssa hänen kirjoituksestaan

Comparison of roles in AI-assisted grading, with the AI grader handling the first read and the teacher deciding final grades

Johdonmukaisuus ensimmäisestä esseestä viimeiseen

Jopa kokeneet opettajat arvioivat kolmatta kymmentä esseetä hieman eri tavalla kuin ensimmäistä. Väsymys, esseiden järjestys ja edellisen esseen laatu voivat kaikki vaikuttaa arvosanaan joko positiivisesti tai negatiivisesti. Saman arviointitaulukon soveltaminen samalla tavalla jokaiseen esseeseen vähentää tätä vaihtelua. Opettajan arvioinnista tulee tällöin oikeudenmukaisuuden tarkistus pikemminkin kuin joka kerta uusi arvio, mikä helpottaa oppilaiden välisten todellisten erojen havaitsemista. Niissä oppiaineissa, joissa arviointi on yhteistä, tämä johdonmukaisuus auttaa myös eri opettajia antamaan samanlaisia pisteitä samanlaisista töistä.

Luonnoksien ja harjoitusesseiden palauttaminen suunnitelmaan

Kun arvostelutyön määrä vähenee, matalan panoksen kirjoitustehtävät tulevat jälleen mahdollisiksi. Opettajat voivat kerätä luonnoksia ja antaa palautetta ennen lopullista määräaikaa, jolloin oppilaat voivat korjata tekstejään selkeiden ohjeiden avulla arvailun sijaan. Aikarajoitetuille harjoitusteksteille, joita ei usein arvostella, voidaan antaa kriteeritason kommentteja, jotka auttavat oppilaita näkemään edistymisensä. Tässä AI-arvostelulla on suurin vaikutus oppimiseen, sillä kirjoittaminen kehittyy toistuvien kokeilujen, palautteen saamisen ja uudelleen kokeilun syklien kautta, ja nämä syklit riippuvat palautteen nopeasta saamisesta.

Aloita yhdellä luokalla ja yhdellä tehtävällä

Sujuvin tapa ottaa tekoälyarviointi käyttöön on aloittaa pienestä. Yksinkertainen kokeilu näyttää yleensä tältä:

  • Valitse yksi kurssi ja yksi tuleva esseetehtävä
  • Lataa jo käyttämäsi arviointitaulukko ja tarkenna mahdolliset epämääräiset tasokuvaukset
  • Arvostele ensin muutama essee itse ja käsittele sitten samat esseet arviointityökalun avulla
  • Vertaa antamiasi pisteitä ja kommentteja työkalun tuottamaan palautteeseen
  • Huomaa, missä olet samaa mieltä, missä eri mieltä ja kuinka paljon tekstiä piti muokata

Opettajat, jotka haluavat kokeilla tätä, voivat aloittaa clasa.ai-palvelussa, joka arvioi esseet valitun arviointitaulukon perusteella ja antaa muokattavaa palautetta kustakin arviointikriteeristä. Yhden tai kahden tehtävän jälkeen useimmilla opettajilla on selkeä käsitys siitä, missä työkalu säästää aikaa ja kuinka paljon korjausta heidän omat luokkansa tarvitsevat.

Tarkkuutta ja oikeudenmukaisuutta koskevat kysymykset

Opettajat kysyvät perustellusti, voiko automatisoituun palautteeseen luottaa. Rehellinen vastaus on, että se tulisi tarkistaa, eikä sitä pidä ottaa itsestäänselvyytenä. Tarkkuus riippuu suuresti arviointitaulukon laadusta ja tehtävän selkeyttä, ja tulokset paranevat, kun molemmat on määritelty hyvin. Jokaisen esseen tarkistaminen ennen julkaisua suojaa oppilaita virheiltä, ja muistiinpanojen tekeminen siitä, missä kohdissa työkalu on yleensä samaa mieltä tai eri mieltä opettajan arvion kanssa, auttaa päättämään, kuinka tarkasti tehtäviä tulisi tarkistaa tulevaisuudessa. Tällä tavalla käytettynä tekoälyn arviointi tukee oikeudenmukaisuutta soveltamalla kriteerejä tasapuolisesti, samalla kun opettaja suojaa virheiltä.

Tekoälyn kirjoittamien töiden käsittely

Samoista työkaluista, jotka auttavat opettajia arvioinnissa, kysytään usein myös päinvastaisesta ongelmasta: opiskelijoista, jotka käyttävät chatbotteja esseidensä kirjoittamiseen. Monissa arviointityökaluissa on tekoälykirjoituksen tarkistus, joka korostaa koneellisesti tuotetuilta vaikuttavia kohtia. Tämä voi olla hyödyllinen vihje, mutta se ei ole todiste. Muodollinen tai kaavamaista kirjoitustyyliä voidaan joskus merkitä virheellisesti, joten korostettua kohtaa on parasta pitää syynä keskustella opiskelijan kanssa, pyytää aikaisempia luonnoksia tai verrata työtä luokassa tehtyyn kirjoitukseen sen sijaan, että se olisi peruste automaattiselle rangaistukselle.

Prosessin selittäminen oppilaille ja perheille

Avoimuus auttaa kaikkia hyväksymään uuden lähestymistavan. Oppilaiden tulisi tietää, että työkalu laatii ensimmäisen palautekierroksen, että opettaja tarkistaa jokaisen tuloksen ja että lopullinen arvosana on edelleen opettajan päätös. Perheet suhtautuvat yleensä myönteisesti, kun he huomaavat, että muutos tarkoittaa nopeampaa ja yksityiskohtaisempaa palautetta eikä opettajan osallistumisen vähenemistä. Uutiskirjeessä tai vanhempainillassa jaettu esimerkki palauteraportista vastaa yleensä useimpiin kysymyksiin jo ennen kuin niitä ehditään esittää ja osoittaa tarkalleen, mitä oppilaat saavat.

Mitä opettajat tekevät vapautuneella ajallaan

Tekoälyarvioijan arvo näkyy siinä, mitä tapahtuu arvioinnin jälkeen. Jotkut opettajat käyttävät vapautuneen ajan henkilökohtaisiin kirjoituskeskusteluihin, joissa viiden minuutin keskustelu voi olla hyödyllisempi kuin sivullinen kommentteja. Toiset lisäävät tärkeisiin tehtäviin ylimääräisen luonnosvaiheen tai järjestävät vertaisarviointitilaisuuksia käyttäen samaa arviointitaulukkoa. Jotkut saavat yksinkertaisesti takaisin iltansa ja viikonloppunsa, mikä on tärkeää, jotta he pysyvät alalla pitkällä aikavälillä. Kaikissa tapauksissa aika siirtyy pois toistuvasta lukemisesta kohti niitä opetuksen osia, jotka riippuvat inhimillisestä suhteesta oppilaisiin.

Felix Rose-Collins

Felix Rose-Collins

Ranktracker's CEO/CMO & Co-founder

Felix Rose-Collins is the Co-founder and CEO/CMO of Ranktracker. With over 15 years of SEO experience, he has single-handedly scaled the Ranktracker site to over 500,000 monthly visits, with 390,000 of these stemming from organic searches each month.

Aloita Ranktrackerin käyttö... ilmaiseksi!

Selvitä, mikä estää verkkosivustoasi sijoittumasta.

Luo ilmainen tili

Tai Kirjaudu sisään omilla tunnuksillasi

Different views of Ranktracker app