Näytetään tekstit, joissa on tunniste arviointi. Näytä kaikki tekstit
Näytetään tekstit, joissa on tunniste arviointi. Näytä kaikki tekstit

maanantai 8. kesäkuuta 2026

Kun arviointi avaa oven oppimiseen – kokemuksia opetusharjoittelusta

Mihin suuntaan arviointia pitäisi kehittää, jotta se aidosti tukisi opiskelijoiden oppimista? Tätä kysymystä lähdin ratkomaan opetusharjoittelussani, joka toteutui pro gradu -tutkielma-opintojaksolla. Kurssi on opiskelijoille merkittävä käännekohta: se määrittää, miten opitut tutkimusmenetelmät konkretisoituvat tutkimuksessa, millaiseksi heidän toimijuutensa graduntekijöinä rakentuu ja miten he kiinnittyvät osaksi tiedeyhteisöä.

 

 

Pedagoginen kehittämiskohde: arvioinnin yhdenmukaisuus, läpinäkyvyys ja opiskelijan toimijuus

Kehittämiskohteekseni valikoitui arviointikäytänteiden selkeyttäminen ja yhdenmukaistaminen sekä opiskelijoiden toimijuuden vahvistaminen. Tutkimusperustainen kirjallisuus korostaa, että arvioinnin tulee olla oppimista ohjaavaa, läpinäkyvää ja opiskelijan itsearviointia tukevaa (Boud & Molloy, 2013). Halusin rakentaa kurssille rakenteita, jotka tukevat näitä periaatteita.

Mitä uudistin – ja miksi?

Tein kolme keskeistä uudistusta:

  • Uudistin arviointikriteerit selkeämmiksi ja tutkimusprosessia paremmin kuvaaviksi.
  • Lisäsin orientoivan tehtävän, joka auttoi opiskelijoita jäsentämään tutkimusprosessin alkuvaiheita ja orientoitumaan siihen, mitä graduprosessi edellyttää.
  • Rakensin itsearviointitehtävän, jonka avulla opiskelijat pystyivät arvioimaan omaa osaamistaan suhteessa kriteereihin.

Näiden uudistusten tavoitteena oli lisätä opiskelijoiden ymmärrystä siitä, mitä heiltä odotetaan ja miten he voivat itse ohjata oppimistaan.

 

Digipedagogiikka osana kehittämistyötä

Hyödynsin digitaalisia ympäristöjä monipuolisesti:

  • Moodle toimi kurssin rakenteen ja materiaalien selkeänä kotipesänä.
  • Howspace-alustalla toteutettiin orientoiva tehtävä ja itsearviointi.
  • Uudistusten käyttöönottoa ja yhteistä ymmärrystä tukevissa osallistavissa työpajoissa (Beck & Blumer, 2019) käytettiin Mentimeteriä ja sanapilviä yhteiskehittämisen tukena.

Digitaaliset työkalut mahdollistivat vuorovaikutteisen, saavutettavan ja opiskelijalähtöisen oppimisympäristön (European Commission, 2020; Opetushallitus, 2021).

 

Mikä onnistui – ja mitä tekisin toisin?

Onnistumisia oli useita:

  • Opiskelijat kokivat arvioinnin aiempaa selkeämmäksi.
  • Itsearvioinnin koettiin lisäävän reflektiivisyyttä ja ymmärrystä omasta oppimisesta.
  • Työpajatyöskentely vahvisti opettajien yhteistä pedagogista linjaa.

Haasteitakin oli. Opintojaksolla ohjaus tapahtuu etäohjauksena, jossa huomasin, että keskustelun rytmitys ja yhden teeman äärelle pysähtyminen vaativat vielä kehittämistä. Jatkossa haluan rakentaa ohjaustilanteista rauhallisempia ja jäsentyneempiä.

 

Opiskelijoiden oppimistulokset ja kurssin läpäisy

Opiskelijoiden oppimistuloksista, opinnäytteiden laadusta tai valmistumisesta uudistuksen jälkeen ei ole vielä pitkän aikavälin tietoa, mutta lyhyen aikavälin havainnot viittasivat siihen, että uudistuksilla oli positiivinen vaikutus oppimiseen.

 

Millaista palautetta sain?

Opiskelijat kuvasivat graduohjausta:

  • ”selkeäksi ja kannustavaksi”
  • ”avoimeksi ja keskustelevaan ilmapiiriin perustuvaksi”
  • ”konkreettiseksi ja eteenpäin vieväksi”

Mentori puolestaan totesi, että työssäni näkyi vahva opiskelijalähtöisyys, itseohjautuvuuden tukeminen ja pedagoginen linjakkuus. Palaute vahvisti käsitystäni siitä, että olen oikealla tiellä – mutta myös siitä, että opettajuus on jatkuvaa oppimista.

 

Uusia ideoita jatkoon

Kehittämistyö synnytti useita jatkoideoita:

  • Vertaisarvioinnin vahvistaminen osaksi gradutyöskentelyä
  • Digitaalisten itsearviointityökalujen laajentaminen
  • Arviointikriteerien visualisointi oppimisen tueksi
  • Yhteiskehittämisen mallin laajentaminen muihin opintojaksoihin

 

Lopuksi

Jos haluaisin jättää yhden viestin kollegoille, se olisi tämä:

Arviointi ei ole kurssin loppupiste, vaan oppimisen moottori. Kun teemme arvioinnin näkyväksi ja osallistavaksi, opiskelijat alkavat nähdä itsensä aktiivisina toimijoina – eivät vain suoritusten tekijöinä.

 

 

 

Lähteet:

Beck, C. W., & Blumer, L. S. (2019). A Model for an Intensive Hands‑On Faculty Development Workshop To Foster Change in Laboratory Teaching. Journal of Microbiology & Biology Education, 20(3), 20.3.46. https://doi.org/10.1128/jmbe.v20i3.1799

Boud, D., & Molloy, E. (2013). Feedback in Higher and Professional Education: Understanding it and doing it well.

European Commission. (2020). Digital Education Action Plan 2021–2027: Resetting education and training for the digital age. https://education.ec.europa.eu

Opetushallitus (2021). Digipedagogiikan suositukset. Laasonen, M. (2022). Metakognitiiviset taidot ja oppimisvastuu korkeakouluopinnoissa.

 

Kirjoittaja: Suvi Kuha


Kurssin toteutus - miten aktivoida opiskelemaan?

Tein opetusharjoitteluni tietotekniikan tutkinto-ohjelman kandidaattivaiheen kurssille “Tekoäly”. Tavoitteena kurssin kehitystyössä oli uudistaa sen toteuksen rakenne linjakkaammaksi ja lisätä siihen opiskelijoita aktivoivia elementtejä. Arviointi suuntaa opiskelijoiden tavoitteen asettelua (Nevgi & Lindblom-Ylänne, 2011), ja tämän huomioiminen olikin keskeistä kurssin uudistamisessa.

Yhden periodin mittaisella tekoälyn kurssilla meitä luennoivia opettajia on kaksi, ja aiemmin luennoimme omista aiheistamme vuoropäivinä, joka palautteen perusteella oli osalle opiskelijoista kuormittavaa. Ratkaisuna tähän päätimme jakaa kurssin kuuteen viikon mittaiseen jaksoon, joista kukin keskittyy tiettyyn kurssin osaamistavoitteissa mainittuun teemaan. Erityisenä pohjustuksena tälle kurssin ohjelmointiharjoitukset uudistettiin – aiemman kahden laajemman ohjelmointityön sijaan jokaiselle kurssiviikolle kehitettiin ohjelmointitehtävä Jupyter Notebook -tiedostona. Nämä tehtävät toteutettiin hyvissä ajoin palkkaamalla tehtävään kesäharjoittelija. Hän toi myös merkittävää opiskelijan näkökulmaa kurssin toteutukseen.

Kurssiviikoille määritettiin säännöllinen aikataulutus: kuhunkin viikon jaksoon sisältyy kaksi luentoa, yksi harjoitussessio ja arvioitavina kotitehtävinä em. ohjelmointitehtävä sekä kirjallinen harjoitustehtävä. Tehtävien palautuksilla oli tiukat määräajat ja niiden tarkistus suoritettiin pian palautuksen jälkeen. Säännönmukaisuus tuo selkeyttä helpottaen kurssin suorittamista. Käänteisen opetuksen ajatusta (Hirsto ym. 2025) tuotiin kurssille liittämällä kuhunkin luentoon esitehtävä, jonka suorittaminen edellyttää tutustumista luennon aiheeseen etukäteen. Esitehtävien toteutus Moodlen Quiz-aktiviteetteina mahdollisti niiden automaattisen arvioinnin ja ennen luentoa pystyi tarkistamaan, oliko tehtävien suorituksessa ollut erityistä ongelmaa.

Uudessa toteutuksessa kurssisuoritusten summatiivinen arviointi perustuu em. kotitehtäviin ja esitehtävistä saataviin pisteisiin (n. 50% painoarvo) sekä lopputenttiin. Harjoitus- ja ohjelmointitehtävien mahdollinen liiallinen kuormitus opiskelijoille huomioitiin kuitenkin siten, että vain 3 parasta ohjelmointi- ja 3 parasta harjoitustehtävää otettiin huomioon loppuarviossa. Suosituksena oli kuitenkin tehdä enemmän asioiden oppimiseksi ja tämän suhteen olikin havaittavissa korkeaa aktiivisuutta (kuva). Lopputentistä saataville pisteille asetettiin kuitenkin minimivaatimus – koska tekoälyn käyttö kotitehtävissä on mahdollista, on jonkin tason osaamista kyettävä näyttämään, kun tällaiset työkalut eivät ole käytettävissä.


Arvosanojen jakautuminen, kurssiaktiivisuus ja tenttiosaaminen. Pystyviiva keskellä esittää maksimipisteitä, jotka kotitehtävistä oli saatavissa: arvosanojen sijoittuminen tästä oikealle indikoi aktiivisuutta tehtävien tekemisessä.





Mentorin ehdotuksesta annoimme myös Peppi-palautteen jättämisestä yhden pisteen arviointiin. Käytännössä tämä toimi todella hyvin: aiemman noin 10-15% sijaan noin 70% kurssin suorittaneista antoi palautteen.

Yhtenä harjoitteluni teemana oli myös luennointitekniikan kehittäminen perinteisestä luennosta enemmän aktivoivaan suuntaan. Hilden ym. (2016) korostavat sähköisten palautejärjestelmien hyödyntämistä, ja itselle luontevimmalta tuntuikin käyttää jotain digityökalua, jolla pyytää opiskelijoilta vastausta pieneen tehtävään. Käytin tähän Presemoa, jonka käyttöä olin harjoitellut jo aiemmassa kurssissa ja joka mahdollistaa myös etänä luentoa seuraavien osallistumisen. Kokemukseni mukaan haasteena on löytää sopivan tasoinen tehtävä, joka istuu luennoitavaan ainekseen.

Kaiken kaikkiaan kurssin toteuttamis ongelmaa on lähestyttävä monesta näkökulmasta, joita pedagogiikan perusopinnot valottivat, ja harjoittelukurssi antoi hyvän mahdollisuuden viedä ideoita ohjatusti käytäntöön. Tehty työ antaa hyvän pohjan jatkaa kurssin kehittämistä.

Ydinsanoma: Kurssin arvioinnin toteutuksella on suuri merkitys opiskelijoiden aktivoinnin kannalta, ja myös kurssipalautteen saamiseen voi vaikuttaa tätä kautta. Nykyisten tekoälyn työkalujen vuoksi lopputentillä on kuitenkin oltava erityinen rooli arvosanan määräämisessä. Tämän ja jatkuvan arvioinnin yhdistelmä sopivalla painotuksella näyttäisikin yhdeltä tähän aikaan sopivalta tavalta toteuttaa kursseja.


Lähteet

Hilden, K., Kariluoto, S. ja Koivula, H. M. (2016) Miten aktivoida luento-opetusta? – Suurten opiskelijamäärien haasteet. Teaching in Life Sciences: Current practices and development 2:1-13.

Hirsto, L., Väisänen, S., Sointu, E. (2025) Käänteinen opetus oppimisen tukena. Teoksessa Hyvinvoiva ja pedagogisesti osaava korkeakouluopettaja, A. Parpala & L. Postareff (toim.), Vastapaino, Tampere.

Nevgi, A., Lindbom-Ylänne, S. (2011) Opetuksen linjakkuus – suunnittelusta arviointiin. Teoksessa Yliopisto-opettajan käsikirja, Lindbom-Ylänne, S. ja Nevgi, A. (toim.), WSOYpro Oy, Helsinki.


Kirjoittaja: Pekka Sangi


Miten loin monivalintatentin arvioimaan korkeamman tason oppimista ulkoa opettelun ja arvaamisen sijasta?

Toteutin opetusharjoitteluni Oulun lääketieteellisen neljännelle lukuvuodelle sijoittuvalla Yleislääkäri -kurssilla, jonka vastuuopettajana toimin. Kehittämistyö lähti liikenteeseen halusta aloittaa summatiivinen arviointi lopputentin muodossa kurssilla, jolla sitä ei ole koskaan aiemmin ollut. Arviointi on keskeinen osa linjakasta opetusta. Tämän muutoksen keskeisin tavoite oli parantaa opiskelijoiden aktiivisuutta sekä tietysti oppimista. Kuten Brown kollegoineen on todennut; jos tavoitteena on vaikuttaa opiskelijoiden oppimiseen, muuta arviointimenetelmiä (Lindblom-Ylänne & Nevgi 2009). Luonnollisesti sivutuotteena arvioinnin lisäämisestä tulen saamaan tulevina vuosina parempaa näyttöä siitä, miten kurssin opetukseen tehtävät muutokset vaikuttavat oppimistavoitteiden saavuttamiseen.

Tenttimuodoksi valikoitui monivalintatentti sillä ajatuksella, että tämä pitkässä juoksussa opettajan aikaa säästäisi. Opintojen vaihetta ja kurssin oppimistavoitteita katsoen pidin kuitenkin välttämättömänä sitä, että tentin tulisi arvioida korkeamman tason oppimista, kuten soveltamista, pelkän muistamisen tai käsitteiden selittämisen sijasta. Kirjallisuuden mukaan edellä kuvattu on monivalintakysymyksilläkin mahdollista, jos ne laaditaan hyvin (Sridharan ym, 2025).

Tämä mielessäni muodostin kirjallisuushaun pohjalta seuraavat pääperiaatteet kysymysten laadinnalle:

  1. Kysymys on aina ratkaistava ongelma, kuten realistinen potilastapaus, yksinkertaisen kysymyksen sijasta (Xiromeriti ym, 2024).
  2. Kysymysrunkoon täytyy pystyä vastaamaan oikein näkemättä vastausvaihtoehtoja (Palmer ym, 2007).
  3. Kysymysrungossa vältetään sanoja tai termejä, joita vastausvaihtoehdoissa on (Palmer ym, 2007).
  4. Kysymysrungossa sekä on ylimääräistä tietoa (jotta opiskelija joutuu arvioimaan, mikä siitä on oleellista) ja että siitä samalla myös puuttuu keskeistä tietoa (joka opiskelijan tulee opintojen vaihe huomioiden jo hallita) (Xiromeriti ym, 2004).
  5. Vastausvaihtoehtoja riittää kolmekin kappaletta, kunhan ne kuvaavat tekemistä, ovat uskottavia ja yhdenmukaisia (pituudeltaan ja kirjoitusasultaan), eivätkä sisällä tulkinnanvaraisia tai absoluuttisia määreitä (Sridharan ym, 2025, Palmer ym, 2007).

Kysymysten laadinnan jälkeen kollegani edelleen vertaisarvioi ne antaen palautetta ja korjausehdotuksia. Kuten lukemani kirjallisuuskin kuvasi, laadukkaiden korkeamman tason oppimista arvioivien monivalintakysymysten luominen (erityisesti uskottavien väärien vastausvaihtoehtojen) on erittäin aikaa vievää.

Tentin ensimmäinen toteutus meni ongelmitta ja tulosten pohjalta oppimistavoitteet saavutetaan hyvin. Opiskelijat ovat antaneet tentistä toistaiseksi vain positiivista palautetta, vaikka kurssin alussa tämä närkästystä herättikin. Eräs opiskelija kuvasi tentin kirjaimellisesti “palvelleen oppimista”, joka koko muutoksen alkuperäinen tavoite toki olikin. Opiskelijoiden osallistumisessa aiempien vuosien toteutuksiin verraten oli nähtävissä selkeä muutos, he osallistuivat; kysyivät, haastoivat ja kommentoivat enemmän.

Ydinsanoma: Summatiivisen arvioinnin lisääminen vaikuttaa keskeisesti opiskelijoiden osallistumiseen. Laadukkaan korkeamman tason oppimista arvioivan monivalintatentin luominen on työlästä, mutta ei mahdotonta.


Lähteet:

Nevgi, A., & Lindblom-Ylänne, S. (2009). Yliopisto-opettajan käsikirja. WSOYpro. 

Xiromeriti, M., & Newton, P. M. (2024). Solving not answering: Validation of guidance for writing higher-order multiple-choice questions in medical science education. Medical Science Educator, 34(6), 1469–1477. https://doi.org/10.1007/s40670-024-02140-7 

Palmer, E. J., & Devitt, P. G. (2007). Assessment of higher order cognitive skills in undergraduate education: Modified essay or multiple-choice questions? BMC Medical Education, 7, Article 49. https://doi.org/10.1186/1472-6920-7-49 

Sridharan, K., & Sivaramakrishnan, G. (2025). Less is more? A systematic review and network meta-analysis on MCQ option numbers. BMC Medical Education, 25(1), Article 1430. https://doi.org/10.1186/s12909-025-08026-5 

 

Kirjoittaja: Mikko Karjalainen

 

 

maanantai 4. syyskuuta 2023

Laboratoriokurssin kehitys – selkeyttä ja linjakkuutta opiskelijoita kuunnellen

Tehtävä: Kirjoita opetusharjoittelustasi lyhyt pohdiskeleva blogikirjoitus. Kerro, mikä oli pedagoginen kehittämiskohteesi. Mitä uudistuksia teit ja miksi? Mikä onnistui? Mikä ei? Mitä uusia ideoita syntyi? 

Kehitin opetusharjoittelussani Biokemian ja molekyylilääketieteen tiedekunnan 3 op:n laajuista Mikrobiologian laboratorioharjoitukset -kurssia. Kurssi on tarkoitettu biokemian 1. vuoden opiskelijoille, kestää kaksi viikkoa ja edellyttää jatkuvaa läsnäoloa. Opiskelijoilla on jonkin verran laboratoriokokemusta ja he ovat suorittaneet juuri vastaavan teoriakurssin.

Tavoitteeni oli päivittää kurssimateriaalit nykyaikaan, vähentää kurssin kuormittavuutta ja siirtää vastuuta töiden ja tulosten yhteenvedosta opiskelijoille. Lisäksi halusin antaa opiskelijoille mahdollisuuden esitellä mielenkiintoisia mikrobilöydöksiään ja saada itse enemmän palautetta kurssista opetuksen kehityksen tueksi. Kehitystyöni nojasi seuraaviin linjakkaan opetuksen periaatteisiin (Biggs, J., & Tang, C. 2007, Lindblom Ylänne & Nevgi 2009):

1. Selkeät ja johdonmukaiset kurssimateriaalit auttavat asioiden hahmottamisessa.

2. Osaamistavoitteiden ymmärtäminen ja niiden saavuttamista mittaavien arviointimenetelmien käyttö auttaa opiskelijoita keskittymään olennaiseen.

3. Tiedon soveltamista vaativien menetelmien käyttö tukee syväsuuntautunutta oppimista.

4. Opiskelijat tulee sitouttaa omaan aktiiviseen tiedonrakentamiseen.

5. Työmäärä tulee mitoittaa vastaamaan opintopisteitä.

6. Opiskelijalähtöisyyden tulee olla opetuksen kehitystyön keskiössä.

Muutin kurssin joka aamuisten johdatusluentojen materiaalit sähköiseen muotoon, päivitin niiden sisältöä ja liitin mukaan uusia kuvia sekä selventäviä videoita. Vähensin kurssin kuormittavuutta luopumalla arvioitavista työselostuksista ja numeerisesta arvioinnista korvaten ne päivittäin tarkastettavalla laboratoriotyöpäiväkirjalla pohdintakysymyksineen. Arvioinnin tiedetään suuntaavan voimakkaasti oppimista (Brown ym. 1997), ja koin että yhdestä tai kahdesta työstä tehtävä selostus ei mittaa riittävällä laajuudella kurssin osaamistavoitteiden täyttymistä. Toisaalta opiskelijoiden tiedetään myös arvostavan oppimisprosessin aikaista palautetta (Lonka 2001), jollaista he työpäiväkirjojen tarkistuksen ja kommentoinnin myötä saavat. Päivitin ja selkiytin harjoitustyöohjetta ja -aikataulua sekä siirsin vastuuta töiden ja tulosten yhteenvedosta opiskelijoille ryhmätyöesitysten muodossa. Pyysin opiskelijoita kuvaamaan puhelimillaan mielenkiintoiset mikrobiviljelmät ja mikroskooppinäkymät, ja koostimme niistä assistenttien kanssa viimeiselle opetuskerralle diaesityksen. Riittävän palautteen saannin varmistamiseksi järjestin viimeisenä kurssipäivänä palautekeskustelun ennalta päättämistäni aiheista ja varasin myös hetken opetuskerrasta Peppi-palautteen antamiselle. Hyödynsin digipedagogiikkaa teoriaosuuksiin upotettujen videoiden ja virtuaalisten bakteerien värjäysten/testien sekä opiskelijoiden ottamien kuvien ja videoiden muodossa. Opiskelijat täyttivät myös Peppi-palautteen puhelimillaan, mikä onnistui yllättävän näppärästi.

Sain tuotua johdatusluentojen materiaalit nykypäivään, ja niistä sekä työohjeesta ja aikataulusta tuli entistä selkeämmät ja havainnollisemmat. Työselostuksista luopuminen ja hyväksytty/hylätty-arviointiin siirtyminen vähensivät kurssin kuormittavuutta niin opiskelijoiden kuin assistenttienkin kannalta. Opiskelijat kuvasivat mikrobilöydöksiään, ja saimme mielenkiintoisen ja hauskan diaesityksen viimeiselle kurssipäivälle, joskin kuvatiedostot osoittautuivat niin suuriksi, että monet niistä jäivät jumiin sähköpostiin. Ensi vuonna kuvien ja videoiden keräys pitää järjestää jollain muulla tapaa. Opiskelijat myös kantoivat vastuun harjoitustöiden sisällön kertauksesta ja tulosten yhteenvedosta esittämällä valmistelemansa ryhmätyöt. Palautekeskustelu sujui loistavasti ja sain arvokasta kohdennettua tietoa kurssin kehitystarpeista.

Opetusharjoittelukurssini Peppi-palaute ei ole vielä sulkeutunut, mutta tämänhetkisen tilanteen mukaan 68,4 % opiskelijoista (n = 19) antoi kurssille erinomaisen arvosanan. Palautteen perusteella kurssilla oli hyvä ilmapiirin, kuormittavuus oli sopiva ja opiskelijoille annettiin riittävästi aikaa oppimiseen. Kurssi koettiin mielenkiintoiseksi ja harjoitustyöt hyvin valituiksi. Oman käsitykseni mukaan kurssin linjakkuus lisääntyi, ja valtaosa opiskelijoista kertoi saavuttaneensa oppimistavoitteet. Monet opiskelijat vaikuttivat laboratoriossa silmin nähden innostuneilta. Kuvia viljelynäytteistä vertailtiin, ja monet kuvasivat jopa videoita elävistä bakteereista mikroskoopin läpi. Kurssilaboratorion valkotaululla kukki tietenkin aiheeseen sopiva opiskelijahuumori.

Toisten yliopistopedagogiikan opiskelijoiden antaman vertaispalautteen mukaan opetus oli hyvin suunniteltu, eteni loogisesti ja antoi opiskelijoille tarvittavat eväät harjoitustöistä suoriutumiseen. Myös läsnäoloani ja tapaani kierrellä opiskelijoiden keskuudessa kurssilaboratoriossa kiiteltiin. Palautteen antajia arvelutti hieman kurssin ensimmäisen aamun teoriaosuuden tietotulva ja nopeus, jolla se kahlattiin läpi. Ymmärrän kritiikin, mutta toisaalta osa käytännön asioista oli opiskelijoille jo ennalta tuttuja, mutta piti kuitenkin käydä läpi muistin virkistykseksi. Sain pieniä parannusehdotuksia aamun teorialuennon dioihin sekä muutaman kehitysidean/kysymyksen liittyen mm. opiskelijoiden aktivointiin ja englannin/suomen kielen käytön pelisääntöihin. Mentorin palautetta opetuksesta odottelen vielä.

Opetuksen linjakkuus rakentuu monista palasista ja hyvään linjakkaaseen lopputulokseen voi päästä eri tavoilla. Linjakkuus ja opetuksen opiskelijakeskeisyys eivät aina vaadi isoja ja raskaita toimia vaan niitä voi lisätä esimerkiksi kertomalla selkeästi oppimistavoitteet ja keskustelemalla opiskelijoiden kanssa kurssin onnistumisesta ja kehityskohteista. Keskeistä on myös turvallisen ja innostavan oppimisilmapiirin luominen sekä riittävän ajan varaaminen oppimiselle.

Lähteet

Biggs, J., & Tang, C. 2007. Teaching for quality learning at university. What the student does. 3. painos. Buckingham: The Society for Research into Higher education & Open University Press.

Brown, G., Bull, J. & Pendlebury, M. 1997. Assessing Student Learning in Higher Education. London: Routledge.

Lindblom-Ylänne, S. & Nevgi, A. 2009. Yliopisto-opettajan käsikirja. WSOY, Helsinki.

Lonka, K. 2001. Syntynyt johtajaksi? Uusia oppimisen mahdollisuuksia. Teoksessa P. Castrén, (toim.). Viisas valta – johtamisen paradoksit. Porvoo: WSBookwell Oy.

Kirjoittaja: Henni Piirainen


maanantai 20. helmikuuta 2023

Oppimisen ja osaamisen opettelua ja omaksumista

Tehtävä: Valitse Yliopistopedagogiikka-lehdestä kehittäminen ja kokeilut –osiosta yksi artikkeli/poissaolotunti itseäsi kiinnostavasta opetuskokeilusta. Tee lyhyt pohdiskeleva blogikirjoitus ja kiteytä postauksen loppuun kaksi asiaa jokaisesta artikkelista, jotka haluat erityisesti jakaa muille blogin lukijoille tai mistä haluaisit saada aikaan keskustelua blogissa.

Valitsemani artikkelit olivat Jatkuvalla arvioinnilla enemmän osaamista kandidaattivaiheen massakurssilla (Paloposki et.al., 2022) ja Opiskelijasta asiantuntijaksi: Oman osaamisen sanoittaminen (Honkanen & Komppa, 2022). Ensimmäisessä artikkelissa keskityttiin pohtimaan ja testaamaan jatkuvan arvioinnin toimivuutta verrattuna ns. lopputenttiin, ja toisessa artikkelissa perehdyttiin oman osaamisen tunnistamiseen ja sanoittamiseen portfoliotyöskentelyn kautta. Mielestäni nämä molemmat artikkelit liittyvät hyvin läheisesti ongelmaan, jonka moni kohtaa viimeistään korkeakoulussa, osa jo aikaisemmin: oppimisen vaikeus. Läpi koko opiskelu-uran moni meistä tottuu opettelemaan asioita ulkoa, sen sijaan että todella sisäistäisi ne ja osaisi soveltaa niitä. Koska oppiminen ja opiskelu tuntuu yhtäkkiä todella paljon vaikeammalta vaatimustason kasvaessa, saattaa se johtaa kursseista tai pahimmillaan koko alasta luopumiseen.

Ensimmäisessä artikkelissa Paloposki ym. testasivat, kuinka kurssilla tehtävä jatkuva arviointi vaikuttaa sitoutumiseen, ja voisiko lopputentistä luopua mahdollisesti kokonaan. He asettivat kokeilun tavoitteiksi kurssin keskeyttämisprosentin pienentämisen, uusintatenttisuoritusten vähentämisen ja oppimisen laadun parantamisen. Jotta tavoitteet saavutettaisiin, kurssilla tehtiin 3 muutosta vuonna 2015: viikoittaisten kotilaskujen painoarvon lisääminen, lopputentin korvaaminen kahdella välikokeella ja pisterajojen ilmoittaminen opiskelijoille jo ennen kurssin alkua. Nämä muutokset auttoivat opiskelijoita arvioimaan omaa tasoaan suhteessa pisterajoihin läpi koko kurssin. Myös yhteistyöhön kotitehtävissä rohkaistiin. Vuonna 2017 kokeista kuitenkin luovuttiin kokonaan, ja arviointi pohjautui täysin kotitehtäviin. Paloposki ym. havaitsivat, että lopputentin korvaaminen viikoittaisilla kotitehtävillä lisäsi opiskelijoiden sitoutumista kurssiin, mikä näkyi korkeampana läpäisyprosenttina, parempina arvosanoina, ja opiskelijoiden myönteisinä kommentteina. 

Toisessa artikkelissa Honkanen & Komppa keskittyivät parantamaan opiskelijoiden oman osaamisen sanoittamista ja siten mahdollisesti työllistymistä ohjatun portfoliotyöskentelyn kautta. Ohjattu työskentely toteutettiin koko lukuvuoden kestävänä kurssina, jonka aikana opiskelijat saivat työstää portfolion ohjatusti, ja sitä myötä tunnistaa omaa osaamisen tasoa ja opetella sanoittamaan sitä.

Tavoitteiksi kurssilla asetettiin, että opiskelija osaisi kurssin jälkeen sanallistaa ja arvioida osaamistaan, taitojaan ja tietojaan, osaisi kirjoittaa ja muokata portfoliotekstiä, tuntisi kurssin jälkeen oman alansa työtilannetta ja -tehtäviä, ja harjaantuisi tekemään omien tavoitteidensa kannalta tarkoituksenmukaisia valintoja myöhemmissä opinnoissaan. Kurssi jakautui kolmeen osaan (urasuunnittelu, asiantuntijataidot, portfolion kirjoittaminen) jotka kukin täydensivät toisiaan. Joka osiossa työskentelytapoina toimivat keskustelut ja kirjoitusharjoitukset sekä niistä annettava palaute. Opiskelijat kokivat kurssin päätteeksi, että keskeisin tavoite, oman osaamisen tunnistaminen ja sanoittaminen, saavutettiin kurssin aikana erinomaisesti.

Vaikka Honkanen & Komppa keskittyivätkin lähinnä osaamisen sanoittamiseen työmarkkinoita ajatellen, on omaa oppimista ja osaamista hyvä kyetä sanoittamaan jo opiskelun aikana. Jos ei itsekään oikein tiedä, mitä osaa ja mitä ei, on vaikeaa lähteä rakentamaan tulevaa oppimista. Myös omat oppimismetodit on hyvä tuntea, jotta osaa lähestyä opiskelua oikealta kantilta. Olen itse Paloposki ym. kanssa samaa mieltä siitä, että jatkuva arviointi on parempi ja realistisempi tapa arvioida osaamista kuin lopputentit. Lopputentit rohkaisevat usein vain hetken kestävään ulkoa oppimiseen, sen sijaan että opeteltava asia sisäistettäisiin ja sitä pystyttäisiin soveltamaan ja yhdistämään aikaisempaan tietoon. Oman osaamisen ja oppimisen tunnistamista ja sanoittamista pitäisi mielestäni harjoitella jo peruskoulussa, sillä se auttaa opiskelussa pitkällä tähtäimellä. Molemmissa artikkeleissa esiin nousi yhteistyön ja tuen tärkeys. Työelämässä yhteistyötä tehdään paljon, harva asia jää yksin tehtäväksi, joten tuntuu hieman hölmöltä, että yliopistoissa painotetaan itsenäistä työskentelyä niin paljon. On mielestäni realistisempaa tehdä yhteistyötä ja käyttää eri tiedonhankintamenetelmiä, kuin päntätä yksin neljän seinän sisällä, jotta muistaa opeteltavan asian edes tentin ajan. 

Lopuksi vielä asiat, jotka nostaisin esiin artikkeleista: Yhteistyö ja sen opettelu on tärkeää jo opiskeluvaiheessa, sillä sitä tehdään työelämässä paljon. Jatkuva arviointi parantaa oppimista ja muistamista, eikä painota niin vahvasti ulkoa opetteluun. Oman osaamisen tunnistaminen ja sanoittaminen on perusta tulevalle oppimiselle. On hyvä tutustua vaadittuun osaamisen tasoon jo etukäteen, oli kyse sitten kurssista tai työelämästä.

Lähteet

Tuomas Paloposki, Viivi Virtanen & Maria Clavert (2022). Jatkuvalla arvioinnilla enemmän osaamista kandidaattivaiheen massakurssilla. Yliopistopedagogiikka 1/2022. Saatavilla: https://lehti.yliopistopedagogiikka.fi/2022/08/22/jatkuvalla-arvioinnilla-enemmanosaamista-kandidaattivaiheen-massakurssilla/ 

Suvi Honkanen & Johanna Komppa (2022). Opiskelijasta asiantuntijaksi: Oman osaamisen sanoittaminen. Yliopistopedagogiikka 1/2022. Saatavilla: https://lehti.yliopistopedagogiikka.fi/2022/08/22/opiskelijasta-asiantuntijaksi-omanosaamisen-sanoittaminen/ 

Kirjoittaja: Katri Ruottinen

maanantai 27. kesäkuuta 2022

Arviointimatriisit arvioinnin kehittämisessä

Tehtävä: Kirjoita opetusharjoittelustasi lyhyt pohdiskeleva blogikirjoitus. Kerro, mikä oli pedagoginen kehittämiskohteesi. Mitä uudistuksia teit ja miksi? Mikä onnistui? Mikä ei? Mitä uusia ideoita syntyi?  

Opetusharjoittelun aikana tavoitteenani oli kehittyä arvioinnissa niin, että opiskelijat mahdollisimman selkeästi näkisivät arvioinnin perusteet ja kokisivat arvioinnin mahdollisimman oikeudenmukaiseksi. Arviointi olisi myös mahdollisimman vähän riippuvainen arvioinnin tekijästä tai vireystasosta. Sadler (2009) mukaan kirjallisuudessa esitetyt järjestelmät useiden kriteerien käyttämiseksi, kuten kriteeritaulukot ja rubriikit, jotka ovat matriisien kaltaisia, eivät edusta riittävästi monikriteeristen laadullisten arvioiden monimutkaisuutta ja voivat johtaa vääriin johtopäätöksiin. Kuitenkin Negvi & Lindblom-Ylänne (2009) mukaan arviointimatriisit ovat hyvä ratkaisu erilaisten kirjallisten töiden arviointiin. Arviointimatriiseissa arvioinnin osa-alueet eritellään ryhmiin, joita mielellään saisi olla maksimissaan 3–7. Tämän jälkeen jokaiselle osa-alueelle määritetään vaatimukset arvosanoittain. Arviointimatriisit soveltuvat myös itse ja vertaisarviointiin ja yhtenäistävät eri henkilöiden, esim. opiskelijoiden ja opettajien tekemää arviointia (Virtanen yms. 2015). Vaikka tämäkään arviointimenetelmä ei täysin tue normaalin elämän kokonaisvaltaista arviointia, niin näen sen kuitenkin selvästi johtavan oikeaan suuntaan. Siksi arviointia on tavoitteena kehittää nimenomaan arviointimatriisien kautta.

Arviointimatriiseja loin kolmelle kurssille. Prosessi- ja ympäristötekniikan peruskurssissa opiskelijat tekevät omasta prosessistaan 1–3 sivun raportin, tekemäni arviointimatriisi huomioi sisällön laajuutta, loogisuutta ja viittauksia, joita kurssissa yritetään harjoitella. Water distribution and sewage networks-kurssilla ja Ympäristölainsäädäntö ja YVA-kurssilla (taulukko 1) arviointimatriisi luotiin kurssityön arviointiin.

Taulukko 1. Ympäristölainsäädäntö ja YVA-kurssille luotu arviointimatriisi.



Jo lukuvuoden ensimmäisellä, Prosessi- ja ympäristötekniikan peruskurssilla, koin arviointimatriisin käytön helpottavan omaa työtäni, ja tuntui helpommalta pysyä tasalaatuisessa arviossa. Opiskelijat näkivät harjoitustyönannon yhteydessä matriisin, eli heille myös toivottavasti arviointiperusteet olivat tavallista selkeämpiä. Testailin ja kehitin matriisia etukäteen tekemällä arviointeja satunnaisille viime vuoden kurssitöille, ja vertaamalla tuloksia niihin arvosanoihin. Opiskelijoiden harjoitustyön arvosanojen keskiarvoihin matriisin käytöllä ei ollut merkittävää vaikutusta, edellisenä vuonna keskiarvo 4,3 ja nyt 4. Opiskelijoilta en saanut tästä mitään erityistä palautetta, toki ensimmäisen vuoden syksyn opiskelijoilla ei ole vielä kovin laajaa perspektiiviä antaakaan arviointiasioista palautetta.

Toisella kurssilla tein koko kurssin kurssityölle arviointimatriisin, mutta kurssin vastuuopettajan kanssa sovittiin, että sitä vasta testataan tänä vuonna, eikä sitä erikseen näytetty opiskelijoille. Testimielessä valitsimme 3 kurssityötä, jotka molemmat luimme ja arvostelimme ja pisteytimme matriisin avulla. Täysin yhtenäisiin tuloksiin emme päässeet, vaan jouduimme keskustelemaan siitä, mitä painottaa, ja muokkasimme siltä pohjalta myös matriisia. Kurssin vastuuopettaja ja mentorini kokivat matriisin hyvänä tulevaisuutta ajatellen. Kolmas kurssi, Ympäristölainsäädäntö ja YVA, jossa matriisia testaan, on parhaillaan meneillään. Matriisi on esitetty opiskelijoille kurssityön esittelyn yhteydessä, ja arviointiin nämä työt minulla tulevat toukokuun loppupuolella.

Tämänhetkisen kokemuksen perusteella kannatan ehdottomasti matriisien käyttöä, sillä sen avulla tunnen tekeväni yhdenmukaisempaa ja tasalaatuisempaa arvioita. Tällöin työn eri osa-alueet saavat tarkasti määritetyt pisteet ja niistä lasketaan painotettu keskiarvo. Arviointimatriisien avulla voitaisiin myös yhtenäistää eri henkilöiden tekemää arviointia.

Lähteet:

Lindblom-Ylänne, S. & Nevgi, A. 2009, Yliopisto-opettajan käsikirja

Sadler, D.R., 2009. Indeterminacy in the use of preset criteria for assessment and grading. Assessment & Evaluation in Higher Education, 34: 2: 159–179

Virtanen, V., Postareff, L. & Hailikari, T. 2015 Millainen arviointi tukee elinikäistä oppimista? Yliopistopedagogiikka, 22:1: 3–11

Kirjoittaja: Heini Postila



 

tiistai 8. maaliskuuta 2022

Pisteiden sekamelskaa?












Mihin kurssiin tein opetusharjoitteluni?  

Terveyshallintotieteen maisterin tutkinto-ohjelman kurssille Johtaminen terveysalalla.

Mikä oli pedagoginen kehittämiskohteeni?

Opintojakson arvioinnin kehittäminen. Aikaisemmin opintojakson arvosana on perustunut yksilötehtävän ja ryhmätehtävän keskiarvoon. Molemmat on arvioitu asteikolla 1-5/hylätty. Lisäksi on pitänyt tehdä tentti, joka on arvioitu asteikolla hyväksytty/hylätty.

Mitä uudistuksia tein ja miksi? 

Yksilötehtävään annettiin valmiit aiheet ja valmis kirjallisuus. Opiskelijat ovat saaneet aikaisemmin suunnata tehtävää oman mielenkiintonsa mukaan, mutta toisaalta he ovat joutuneet itse rajaamaan aiheen hallittavaksi sekä etsimään lähdemateriaalia tehtävää varten. Nyt yksilötehtävien aiheet valittiin opintojakson ydinaineksen pohjalta. Tämä helpotti myös opettajan arviointityötä. Yksilötehtävä muodostui kolmesta osatehtävästä (kolme aihetta). Kustakin osatehtävästä pystyi saamaan maksimissaan 20 pistettä, eli kokonaisuudessaan yksilötehtävästä saattoi saada 60 pistettä. Ryhmätehtävästä pystyi saamaan maksimissaan 25 pistettä. Tentti oli pakollinen ja siitä pystyi saamaan maksimissaan 9 pistettä. Nämä tentistä saadut pisteet laskettiin mukaan pistepankkiin, eli tentillä pystyi saamaan lisäpisteitä. Ryhmätehtävälle annettiin pisteytyksessä vähemmän painoarvoa kuin yksilötehtävälle, koska haluttiin painottaa henkilökohtaisen suorituksen osuutta. Tein yksilö- ja ryhmätehtävää varten arviointimatriisit.

Miten hyödynsin digipedagogiikkaa?

Luennoilla ja työpajoissa käytin Kahootia asioiden kertaamiseksi ja lähtötason selvittämiseksi sekä zoomin breakout roomseja.

Mikä onnistui? Mikä ei? Mitä olisi kannattanut tehdä toisin?

Ryhmätyöskentely onnistui hyvin ja opiskelijat olivat aktiivisia ryhmätöissä ja zoomissa. Luentoja oli vähän ja ne olisi voinut hyödyntää paremmin käyttämällä flippausta.

Millaista palautetta sain opiskelijoilta? Entä vertaisilta/mentorilta?

Matriisista opiskelijat antoivat palautetta, että se on vaikeasti tulkittava: neloseen riittää aiheen kattava tarkastelu, mutta vitoseen vaaditaan kriittistä tarkastelua – mitä tämä kriittinen tarkastelu tarkoittaa? Opiskelijoille pyrittiin avaamaan mitä vaaditaan kriittiseen tarkasteluun. Palautteen perusteella luennoilla aktivointia olisi voinut olla enemmän.

Mitä uusia ideoita syntyi?

Kahoot toimii hyvin myös ”jään rikkojana” opetuksen alussa ja aktivoi keskustelua.

Mitä muuta haluan sanoa?

Rohkeasti kokeilemaan uusia käytänteitä!

Lähteet

Nevgi A & Löfström E (2011) Pyöreän pöydän opiskelijat – opiskelijoiden ohjaaminen aktiivisiksi osallistujiksi seminaarityöskentelyssä. Peda-forum – yliopistopedagoginen aikakausjulkaisu 18(1).

Taras M (2005) Assessment – summative and formative – some theoretical reflections. British Journal of Educational Studies 53(4):466-478.

Virtanen V, Postareff L & Hailikari T (2015) Millainen arviointi tukee elinikäistä oppimista? Yliopistopedagogiikka 1/2015.

Wosnita M & Volet S (2013) Trajectories of change in university students´ general views of group work following one single group assignment: significance of instructional context and multidimensional aspects of experience. European Journal of Psychology of Education 29:101-115.

Kirjoittaja: Moona Huhtakangas


perjantai 18. joulukuuta 2020

Tehtävä: Valitkaa ryhmänne kanssa oppimisen arviointimenetelmä tai arvioinnin muoto, mistä haluatte tietää lisää ja kiteyttäkää blogipostaukseen:

- arviointimenetelmän tai -muodon esittely
- mitä vaiheita menetelmään liittyy ja millaisia valmisteluita se vaatii 
- menetelmän vahvuudet ja haasteet


Vertaisarviointi itsetuntemusta kehittämässä

 

(Kuva: Ketonen 2015)

Vertaisarviointi tukee laadun varmistamista ja sen kehittämistä. Vertaisarviointi on yleensä kriteeriperusteista arviointia, jossa vastaavassa ympäristössä toimivista arvioijista koostuva vertaisarviointiryhmä, joka arvioi tiettyä kohdetta tai kohteita.

Vertaisarviointi tarkoittaa opiskelijoiden keskinäistä arviointia, joka voi koskea esim. koko oppimisprosessia, yksittäistä tehtävää tai keskusteluaktiivisuutta. Vertaisarviointi voi olla ohjattua tiettyihin arviointikriteereihin pohjautuvaa opponointia tai vapaamuotoista kommentointia.

Arvioinnilla on kehityksellinen ja arvioiva tavoite. Kehityksellisen tähtää oppimisen edistämiseen ja arvioiva painottaa opiskelijoiden yhdenmukaista ja oikeudenmukaista kohtelua. Tavoitteisiin pyritään kahden erilaisen arviointimenetelmän kautta; formatiivisen ja summatiivisen avulla. Formatiivisella arvioinnilla selvitetään, kuinka hyvin opiskelijat osaavat ja hallitsevat opiskeltavan asian. Se on luonteeltaan oppimista edistävää ja oppimiseen ohjaavaa arviointia. Arviointi toimii myös aktivoivana opetusmenetelmänä ja palautteen anto opiskelijalle on arviointia. Summatiivinen arviointi kohdistuu oppimisen lopputulokseen, kurssin tai opintojakson suorituksen arviointiin (Lindholm-Ylänne ym. 2011, 156-157).

Nykyisin yliopistoissa on siirrytty testaamisesta enemmän arviointipainottuneisuuteen eli hyödynnetään sekä vertais- että itsearviointia. Vertaisarvioinnissa opiskelijat arvioivat toisiaan joko antamalla vapaamuotoista palautetta tai keskittymällä arvioinnissa arviointikriteerien tarkisteluun (Lindholm-Ylänne ym. 2011, 168- 169). Vertaisarvioinnin tavoitteena on aktivoida opiskelijoita ja osallistuttaa heitä omassa oppimisessaan. Vertaispalautteen antaminen ja vastaanottaminen on ihmiselle luontaista (Nieminen, 2019).

Opettajan tehtävänä on organisoida, miten vertaisarviointi käytännössä toteutetaan (Nieminen, 2019). Opiskelijat voi ottaa mukaan vertaisarvioinnin suunnitteluun, jolloin opiskelijat ottavat alusta asti aktiivisen roolin arvioinnissa ja näin tuetaan opiskelijalähtöistä oppimista. Opettaja selventää oppilaille arviointiprosessin vaiheet sekä tavoitteet, sillä oppilailla ei välttämättä ole juurikaan aikaisempaa kokemusta vertaisarvioinnista. Opettaja voi aluksi antaa oppilaille esim. listan kysymyksistä, joihin vastaaminen auttaa ymmärtämään, mihin asioihin arvioinnissa tulisi kiinnittämään huomiota (Anewalt 2005).

Vertaisarvioinnin jälkeen on hyvä järjestää palautekeskustelu, jossa arviointiprosessia ja arviointituloksia selvitellään yhdessä. Toisten opiskelijoiden arvioiminen voi tuntua vaikealta ja opiskelijat tarvitsevatkin aluksi opettajan tukea tehtävässä (Lindholm-Ylänne ym. 2011, 168- 169). Tärkeää vertaisarvioinnin onnistumiseen opiskelijatasolla on myös, että opettajat ovat vastaanottavaisia itsetutkiskelulle ja muutoksille (Sluijsmans 2002).

Hyvät vertaisarviointitaidot eivät tule luonnostaan vaan niiden oppiminen vaatii harjoittelua. Arviointikriteerit tulee ymmärtää ja sisäistää. Erittäin tärkeää on myös laadun hahmottaminen, eli työn vertaaminen arviointikriteereihin. Vertaisarvioinnin palaute tulee myös muotoilla niin, että se on ymmärrettävä ja vastaanottaja pystyy ottamaan sen vastaan (Sluijsmans 2002). Opiskelijoista toisten arvioiminen voi tuntua vieraalta ja vaikealta ja opiskelijat voivat esimerkiksi pelätä arvioinnin seuraamuksia kuten sitä, että toinen pahoittaa mielensä saamastaan palautteesta (Nieminen, 2019). Vertaisarviointi on hyödyllistä, luotettavaa, mutta toisinaan opiskelijat voivat antaa toisilleen hiukan korkeampia arvosanoja kuin opettaja antaisi. Vertaisarvioinnissa voidaan toimia myös siten, että samaa työtä arvioi useampi opiskelija, jotta saadaan enemmän palautetta ja arviointia (Lindholm-Ylänne ym. 2011, 168- 169).

Vertaisarvioinnin harjoitteleminen kehittää opiskelijoiden arviointitaitoja ja auttaa heitä näin myös tulevassa työelämässä. Työelämässä palautteen antamista ja vastaanottoa tarvitaan mm. johtamisessa. Vertaisarvioinnin harjoittelu edistää myös kriittisen ajattelun ja ajanhallinnan taitojen kehittymistä, vahvistaa itseluottamusta ja vastuuntuntoa, edistää tietoisuutta ryhmädynamiikasta ja kehittää metakognitiivisia taitoja eli taito arvioida omaa toimintaa, suorituksia, tietoja ja taitoja kehittyy (Lindholm-Ylänne ym. 2011, 168-169). On myös saatu tutkimustuloksia, että vertaisarviointi vähentää testiahdistusta opiskelijoiden keskuudessa (Sluijsmans 2002).


Lähteet:

Anewalt, K. (2005) Using peer review as a vehicle for communication skill development and active learning. Journal of computing sciences in collages vol.21, No.2

Ketonen, L. (2019) Vertaisarviointi sopii hyvin luonnontieteiden opetukseen, Dimensio

Lindblom-Ylänne, S. Nevgi, A. Hailikari & T. Wager M. (2011), Teoksessa Lindblom-Ylänne & S. Nevgi, A. (toim.) Yliopisto-opettajan käsikirja. Luku 8 Oppimisen arvioinnin teoriaa ja käytäntöä, s. 156- 191. WSOY Pro Oy. Helsinki.

Nieminen, J.H. (2019). Vertaisarviointi. Teoksessa A. Luostarinen & J.H. Nieminen (toim.) Arvioinnin käsikirja. Jyväskylä: PS-Kustannus, 189–210.

Sluijsmans, D. M. A. (2002). Student involvement in assessment, the training of peer assessment skills. Interuniversity Centre for Educational Research.


Kirjoittajat: Anne Ekman, Saara Koivusalo, Jaana Keränen, Johanna Silvola
yliopistopedagogiikan opiskelijoita Oulun yliopistosta

perjantai 5. kesäkuuta 2020

Kaikki pelaa? Oppimisen aktivointi osallistavin ja autenttisin tehtävin

Opetusharjoittelun kehitettävänä opintojaksona farmakologian ja toksikologian peruskurssi

Teimme opetusharjoittelumme farmakologian ja toksikologian peruskurssilla, jolle osallistuu lääketieteen ja hammaslääketieteen 2. vuosikurssin n. 200 opiskelijaa sekä satunnaisia muita opiskelijoita. Farmakologian ja toksikologian opintojakson tarkoituksena on kehittää valmiuksia lääkeaineiden järkiperäistä ja mahdollisimman turvallista käyttöä varten. Lisäksi opiskelija oppii ryhmätyöskentelytaitoja sekä esiintymistaitoja.

Opintojakso koostuu 33:sta kahden tunnin luentokerrasta sekä kahdeksasta kahden-neljän tunnin ryhmäopetuksesta. Suoritukseen vaaditaan osallistuminen ryhmäopetuksiin sekä neljän tentin hyväksytty suorittaminen: alkutentti, kaksi välitenttiä sekä lopputentti. Kurssiarvosana määräytyy lopputentin mukaan. Kurssin laajuus on 10 opintopistettä. Oppimateriaalina on 1200-sivuinen oppikirja ja ryhmäopetuksissa ennakkolisämateriaalina ovat alkuperäistutkimukset, sekä eurooppalaiset että suomalaiset Käypä Hoito –suositukset. Materiaali ohjaa toivottavasti ymmärrykseen siitä, mistä lääketieteellinen tieto on peräisin, miten se päätyy hoitosuosituksiin ja minkälaista materiaalia voi käyttää tietolähteenä työelämässä. Opettajia kurssilla on 18.

Pedagoginen kehittämiskohteemme

Kehittämiskohteemme kurssilla olivat osa ryhmäopetuksista, jotka käsittelevät sydän- ja verisuonitautien lääkehoitoa. Valitsimme juuri nämä ryhmäopetukset kehittämiskohteeksi, koska a) ne ovat ensimmäisiä ryhmäopetuksia kurssilla ja halusimme aktivoida opiskelijat jo varhaisessa vaiheessa, b) aihe on keskeinen mutta myös haastava farmakologian osa-alue ja c) olemme saaneet aiemmin palautetta, että nämä opetukset eivät ole mielekkäitä tai riittävän tehokkaita.

Toisena kehityskohteena halusimme myös suunnata arviointia linjakkaamman opetuksen mukaisesti (Virtanen ym, 2015).

Uudistusten tavoitteena ryhmäopetusten ja arvioinnin kehittäminen

Halusimme opiskelijoiden saavan ryhmäopetuksista enemmän irti ja pyrimme siihen, että ”vapaamatkustajia” ei opetuksissa olisi. Aiemmin opetuksen aktiivinen osa eli tiedon etsiminen ja esityksen valmistelu on tapahtunut ennen opetusta, ja opetuksessa on vain esitelty tulos Powerpoint-esityksenä. Tämä ei ole aktivoinut opiskelijoita enää varsinaisen opetuksen aikana keskusteluihin, eikä opettaja juuri ole pystynyt todentamaan kaikkien tasapuolista osuutta ryhmätöiden valmisteluun. Nyt pyrimme saamaan aktiivisen osuuden myös ryhmäopetukseen, ettei se olisi vain esitysten ”läpikäyntiä”.

Kahdesta ryhmäopetuksesta ensimmäisessä (verenpainelääkkeet) opiskelijat saivat ennakkomateriaalin (verenpainelääkkeiden tehon isoissa väestöissä osoittavat alkuperäisartikkelit ja kohonneen verenpaineen hoidon Käypä hoito -suositukset), jonka avulla he ratkoivat pienryhmissä potilastapaukset opetusta edeltävästi. Varsinaisessa opetustilanteessa he sitten palapelitekniikalla opettivat omat tapauksensa muille 3-4 hengen ryhmissä. Opetuksen onnistumisen kannalta etukäteisohjeistaminen oli tärkeää: tehtävänannossa painotimme, että jokaisen asiantuntijan tehtävänä on perehtyä omaan vastuualueeseensa ennen seuraavaa kontaktitapaamista niin, että kykenee opettamaan asian hyvin muille ja varautumaan toisten (myös opettajan) kysymyksiin (Palola, 2015).

Oli myös ideana, että opiskelijat saavat nostaa palapeliryhmässä esiin tulleita kysymyksiä Padletille, josta vastaukset voitaisiin kunkin kysymyksen lopussa yhdessä pohtia niin että vastausvuoro olisi etupäässä kysymyksen valmistelleella ryhmällä. Näin jokainen opiskelija joutuisi ottamaan vastuuta oppimisestaan ja toistensa opettamisesta – ja oppimisesta. Katsoimme tapauksia lopuksi myös yhdessä ja nostimme tärkeimmät asiat vielä esiin Socrative-kyselyn avulla.

Tämä oli opintojakson toinen ryhmäopetuskerta, joten tarkoitus oli saada opiskelijat motivoitua valmistelemaan ryhmäopetukset hyvin jo alkuvaiheessa. Pienryhmissä he kuitenkin saisivat pehmeän laskun asioiden esittämiseen ja ehkä rohkaistuisivat pohtimaan asioita yhdessä jo alkuvaiheessa (Gupta, 2014).

Toisessa ryhmäopetuksessa (muut sydän- ja verenkiertoelimistön lääkkeet sekä diabeteslääkkeet) opiskelijat saavat ennakkomateriaalin (Käypä Hoito –suositukset), joihin perehtyvät (yksin tai ryhmässä) kotona. Varsinaisessa opetuksessa he sitten 3-4 hengen ryhmissä ratkoivat niihin liittyviä potilastapauksia ja lopuksi nostettiin yhdessä vielä tärkeimmät asiat niistä esiin, esim. Padletin avulla. Myös Socrative-kyselyllä opiskelijat lopuksi testasivat omaa oppimistaan ja opettaja sai palautteen omasta opetuksestaan. Potilastapausten muodossa teoria linkittyi käytäntöön ja lisäsi aiheen kiinnostavuutta.



Palapelitekniikalla halusimme kokeilla opiskelijoiden vastuuttamista, että jokainen joutuisi oikeasti opettelemaan asian hyvin, koska joutuu opettamaan sen toisille. Toisessa ryhmätyössä potilastapaukset tulevat kuin ”lääkärille” ja ne joutuu ratkomaan nopeammin. Opettaja on kuitenkin tilanteessa mukana ja voi tarvittaessa opastaa ja ohjata oikeaan suuntaan. Opintojakson jokainen ryhmäopetuskerta (yht. 8 kpl) on nyt vähän erilaista kaavaa noudattava, joten riski opiskelijoiden mielenkiinnon lopahtamisesta ryhmätöiden osalta vähenee.

Lisäsimme opetuksiin myös muita pienempiä kokeiluja. Ryhmäopetuksen alussa halusimme kerrata verenpainelääkkeiden vaikutusmekanismit. Näytimme opiskelijoille kuvitteellisen tenttivastauksen, sekä yksinkertaistetun arviointimatriisin ja pyysimme arvioimaan mitä vastauksesta puuttuu ja mikä on hyvää, minkä jälkeen keskustelimme yhdessä asiasta. Saimme palautetta, että kertaus oli hyvä, mutta itse ajattelemme, että tämän voisi toteuttaa jonakin mielekkäämpänä tehtävänä, vaikka kuvan täydentämisen avulla. Taka-ajatuksena tehtävässä myös oli, että arviointi tulisi avoimemmaksi. Sattumaa tai ei, yksikään opiskelija ei pyytänyt tarkistamaan välitentin jälkeen tenttivastaustensa arviointia, mitä ei ole tapahtunut aiemmin. Lopputenttiin asti tämä ei enää kantanut.

Toisena pienkokeiluna ohjeistimme opiskelijoita antamaan rakentavaa palautetta. Opiskelijat antoivat kirjallisen palautteen mitä oppivat toistensa palapeliesityksestä, mikä toimi ja mikä ei toiminut. Keräsimme näistä kokoomapalautteen ja näytimme seuraavan ryhmäopetuksen aluksi. Opiskelijat saivat jatkoon vinkkejä miten opettaa, eikä palaute ollut kenellekään henkilökohtaista. Palautteen anto ja saaminen tuntui opiskelijoista mukavalta, palaute oli pääosin positiivista ja sen esittely samoin. Molemmat pienkokeilut teoriassa opettivat antamaan ja saamaan palautetta, ehkä toimimaan myös formatiivisena arviointina. Nämä geneeriset opit olivat kuitenkin vähän irrallisia, eivätkä kohdistuneet isompaa panosta vaativaan tuotokseen. Lähiopetusajan rajallisuuden vuoksi painopiste pitää jatkossa olla opittavassa asiassa.

Arvioinnin kehittämiseksi välitenttien kysymyksiä pyrittiin muokkaamaan soveltavammiksi ja paremmin linjakasta opetusta vastaavaksi. Vallitsevan tilanteen takia toinen välitentti peruuntui ja kevään loput tentit piti siirtää verkkotenteiksi moodleen.

Digipedagogiikan hyödyntäminen

Socrativea käytettiin asioiden kertaamiseen ja siinä myös opettaja sai palautetta miten opetus on mennyt ja ovatko oleelliset asiat jääneet mieleen (Schlegel & Selfridge, 2014). Padletia ohjeistettiin käyttämään siihen, että ajatuksia voisi kirjoittaa muistiin opetuksen aikana ja niitä voidaan sitten myös yhteisesti pohtia. Kysymyksiä opiskelijat eivät juuri Padletiin kirjanneet. Toisessa ryhmäopetuksessa Padletia hyödynnettiin niin, että opiskelijat kirjasivat siihen pääasioita potilastapauksista, jotta muiden oli ehkä hieman helpompi sitten seurata kun tapaukset esiteltiin. Opiskelijat pystyivät myös tallentamaan yhteenvedot sieltä itselleen.

Opiskelijat esittivät palapelimenetelmällä asiat toisilleen haluamallaan tavalla, ja saivat halutessaan käyttää myös digipedagogiikkaa apuna. Emme tähän varsinaisesti ohjanneet, mutta kokemus näytti, että muiden oli helpompi seurata toisten opetusta, jos käytössä oli esimerkiksi Power Point – esitys. Ensi vuonna on varmaankin hyödyllistä ohjeistaa opiskelijoita tekemään tällainen esitys tai edes jotenkin visuaalisesti esittämään opetuksen oleelliset asiat.

Mikä onnistui? Mikä ei? Mitä olisi kannattanut tehdä toisin?

Mielestämme opetukset toteuttivat hyvin sosiokonstruktivistista oppimiskäsitystä, pienissä 3-4 opiskelijan ryhmissä tuli hyvin keskustelua ja ryhmät olivat ns itseään korjaavia, eli jos joku sanoi jotain väärää niin yleensä joku osasi korjata tiedon, eli ei juuri ollut niin, että kaikki olisivat ajatelleet asiasta yhtä väärin. Tämä myös koettiin hyödylliseksi, että sai ”opettaa” kaveria. Varsinkin palapelitekniikasta oli alussa huoli, että opettavatko opiskelijat toisiaan väärin, mutta tätä ei näyttänyt tapahtuvan. Palautteen mukaan loppukertaus asioista oli opiskelijoiden mielestä hyvin tärkeä.

Opiskelijat olivat paljon aktiivisempia kuin aiemmin, kun pääsivät pienryhmissä keskustelun vauhtiin, ja kertoivat loppukeskustelussakin paremmin omista tapauksistaan. Aiempina vuosina keskustelua ei ole saanut vastaavasti ”rullaamaan”. Toisten opettaminen, yhdessä pohtiminen ja uusien näkökulmien saaminen koettiin hyödylliseksi. Osa opiskelijoista jopa toivoi, että kaikki opetukset toteutettaisiin samalla kaavalla. Muutettavaa opetukseen jäi menetelmän puolesta se, että opiskelijat haluaisivat opetuksen alussa pikaisesti kokoontua ryhmänä ennen palapelin opetusryhmiin jakaantumista, ja katsoa opetettavan asian vielä läpi yhdessä. Tämä tosin vie vähän turhaa aikaa opetukselta. Myös opetustila saattaa asettaa haasteita, jos useampi ryhmä joutuu keskustelemaan pienessä tilassa taustahälinässä.

Digipedagogiikka sekä toimi että ei. Socrative-kysely sai todella paljon positiivista palautetta opiskelijoilta, mutta toisaalta tekninen toteutus vaatii vielä hiomista. Kysymysten määrä kannattaa pitää alle 10, muuten se vie liian paljon aikaa ja keskittyminenkin ehkä opiskelijoilla herpaantuu. Kysymysten pitäisi myös olla sopivan tiiviisti muotoiltu, ei pitkiä kysymyksiä ja vastauksia. Socrativen etu on myös sen osallistavuus: jokainen saa äänensä kuuluviin ja pääsee testaamaan omaa osaamistaan. Padlet ei houkutellut kirjoittamaan kysymyksiä spontaanisti, mutta se toimi kerättäessä tiivistelmät potilastapauksista. Lisäksi opiskelijat pystyvät Padletista tallentamaan itselleen muistiinpanot. Padlet toimi oikein hyvin myös välittömänä palautteenantokanavana.

Materiaalia rajattiin nyt selkeämmin kuin aiemmin, esim. mitkä kappaleet Käypä hoito –suosituksesta ovat oleellisia juuri tässä opetuksessa. Siltikin tuli palautetta, että materiaalia oli liikaa. Toisaalta osassa palautteessa pidettiin hyvänä, että oppi tiedonhakua. Opiskelijoiden tulee kuitenkin oppia löytämään tarvittava tieto materiaalimassan keskeltä, ja oppia priorisoimaan mikä on milloinkin oleellista.

Yksi etukäteismurhe oli se, onko toinen opetus liian kliininen? Toisen ryhmätyön neljä potilastapausta oli selkeästi aivan liikaa toisen vuoden opiskelijoille. He ehtivät perehtyä ehkä vain yhteen tapaukseen kunnolla. Annoimmekin heidän tehdä niin, koska tapaukset olivat aika samantapaisia ja niissä piti ottaa samoja asioita huomioon. Ehkä oli hyväkin, että meni näin. Opiskelijapalautteen mukaan sydänlääkkeiden opetus potilastapausten kautta todettiin oikein hyödylliseksi ja havainnollistavaksi. Tapaukset eivät olleet myöskään liian helppoja. Palautteessa myös mainittiin, että potilastapausten osittainen päällekkäisyys ei haitannut vaan lisäsi asian oppimista kertauksen kautta. Myös alkuvaiheen lääketieteen opiskelijoille on motivoivaa se, että he pääsevät yhdistämään tietoa potilastapauksiin (Pyörälä, 2014).

Aikataulutus ensimmäisessä ryhmäopetuksessa meni todella hyvin, mutta toisessa opetuksessa aikataulu oli hieman tiukka jopa sen muutoksen jälkeen, että yksi ryhmä perehtyy vain yhteen tapaukseen. Tätä pitää varmaan ensivuodeksi optimoida. Opiskelijat esittivät, että jokainen ryhmä perehtyisi jatkossa vain yhteen tapaukseen ja esittelisi sen muille. Palautteessa esitettiin myös, että potilastapaus havainnollistettaisiin visuaalisesti, koska siinä on paljon yksityiskohtia jotka on hankala muistaa tapausta käsiteltäessä. Opiskelijoille voisi antaa tapaukset etukäteen tutustuttavaksi jo kotona.

Millaiset opiskelijoiden oppimistulokset olivat? Oliko kurssilla vaikutusta kurssin aiempaan läpäisyyn?

Emme osaa sanoa vaikuttiko ryhmäopetusten muutos oppimistuloksiin, koska lopputentti jouduttiin järjestämään poikkeuksellisesti etätenttinä, eikä ole täysin vertailukelpoinen aiempien vuosien tenttien kanssa.

Millaista palautetta saimme opiskelijoilta? Entä vertaisilta/mentorilta?

Ensimmäisen ryhmäopetuksen palautteessa oppimista edistävinä asioina pidettiin erityisesti ryhmässä tekemistä ja toisille opettamista, hyvää etukäteisvalmistautumista ja sitä, että lopussa käytiin vielä yhteisesti asiat läpi ja kerrattiin tärkeimmät keskustelemalla sekä lopuksi vielä Socrative-testin avulla. Nämä olivatkin juuri asioita joiden toivoimme opetuksessa toimivan, joten palaute oli tältä osin erittäin rohkaisevaa! Bonuksena saatiin vielä vapautunut ilmapiiri. Kehitysehdotuksia opetuksen teknisen toteuttamisen suhteen otamme huomioon tulevissa opetuksissa. Socrative-kyselyn hyötyä voi vielä parantaa ja jopa laatia niitä itsenäisiksi kertaaviksi kotitehtäviksi. Kehityskokeiluna laadimme Socrative-kyselyn luennon jälkeen tehtäväksi, ja opintojakson loppuun mennessä sen oli käynyt täyttämässä ”vain” kolmasosa kurssilaisista. Voi kuitenkin pohtia onko yli 60 opiskelijaa riittävä määrä vaivannäölle. Sisällön puolesta ryhmäopetukseen ei esitetty parannettavaa, vaikka alkuperäisartikkeleihin tutustumista pidetäänkin osin turhana. Kun on kaikki materiaali ja hoitosuositukset napin painalluksen takana saavutettavissa, ehkä hämärtyy mistä ne ovat peräisin ja miten sinne päätyneet.

Toisesta ryhmäopetuksesta saimme hyvin paljon palautetta, sekä hyvää että kehitettävää. Aikataulutuksessa oli hieman ongelmia, koska alkuperäinen suunnitelma tapauksien määrästä oli ehkä hieman liian kunnianhimoinen. Tästä tulikin kaikista eniten ”negatiivista” palautetta. Eli että aika ei riittänyt tai että olisi haluttu katsoa jo etukäteen kotona potilastapauksia tai että niitä olisi ollut vähemmän tai ne olisivat olleet yksinkertaisempia. Muokkasimme aikataulutusta opetusten edetessä ja ilmeisesti tilanne palautteiden mukaan hieman parani, mutta sitä täytyy vielä ensivuodeksi optimoida. Positiivista palautetta tuli samoista asioista kuin ensimmäisessä ryhmätyössä, eli etukäteen valmistautumisesta, ryhmässä tekemisestä, yhteisestä kertaamisesta ja vielä Socrative-kertaamisesta. Ehdottomasti eniten kehuttiin potilastapauksia ja sitä että ne olivat sopivan haastavia. Usea myös mainitsi, että oli hyödyllistä oppia tiedon etsimistä.

Saimme toteuttaa opetusharjoittelun yhdessä ja antaa ja saada palautetta toisiltamme harjoittelun edetessä. Teimme kuten opetimme: pohditaan yhdessä ja opitaan toiselta.



Lopuksi ajatuksia arvioinnista

Opintojaksomme arvosana perustuu ainoastaan lopputenttiin. Alussa ja välillä pidettävät tentit myös toki toimivat palautteena opitusta, jonkunlaisena formatiivisena arviointina. Nyt kun nämä tentit siirtyivät moodleen, opiskelijat pääsivät helposti katsomaan osaamistaan ja vertailemaan oikeisiin vastauksiin. Näin tentti toimii paremmin oppimistapahtumana. Verkkotenttien ongelma on kuitenkin se, että kysymysten tulee olla soveltavia, jotta helppoa vastausten googlausta tai copy-pastausta ei voi harrastaa. Helppo tentti valitettavasti laiskistaa oppimista.

Emme voi mitenkään varmistaa 200 opiskelijan osaamista muutoin kuin tenteillä, joten summatiivinen arviointi on siltä osin välttämätön. Voisimme lisätä formatiivisen arvioinnin osuutta vaikka arvioimalla opiskelijoita Socrative-kyselyjen osaamisen perusteella joka vaikuttaisi arvosanaan. Opiskelijat eivät kuitenkaan kysyttäessä innostuneet tästä tavasta, joka ”lisäisi paineita” ryhmäopetuksissa ja siten myös veisi ryhmäopetusten rentoa ilmapiiriä.

Lopputentin suhteen ongelma on sama kuin netin pääsykokeissa: miten varmistaa opiskelijan oma osaaminen? Minimoimme ryhmätyömahdollisuuden ja kaikkien vastausten googlaamisen rajoittamalla tenttiaikaa sekä sekoittamalla kysymysten järjestyksen. Kysymykset tulivat eri opiskelijoille sattumanvaraisessa järjestyksessä ja jokaiseen kysymykseen oli vastattava ennen kuin pääsi seuraavaan, eikä kysymyksiin voinut enää palata. Sallimme tiedon etsinnän netistä ja kysymykset voisikin laatia niin, että tietokantoja, kuten interaktio- ja lääketietokantaa pitäisi samalla hyödyntää. Yhdistimme tenttiin monivalintakysymyksiä ja esseekysymyksiä potilastapausten muodossa. Opiskelijat antoivat tylyä palautetta tentin lisärajoituksista, mutta vaihtoehtoja ei valittavasti löytynyt. Lukihäiriöiset kärsivät rajoituksista, tämän ymmärsimme vasta jälkikäteen palautteesta. Seuraavaan tenttiin annamme pyydettäessä toki lisäaikaa. On myös huomioitava, että joillekin opiskelijoille etätenttimuoto voi huomattavasti parantaa oppimista, kun voi luottaa että tentin saa tehdä rauhallisessa tilassa ja asioiden hahmottamista edistävä materiaali on käytössä.

Saimme myös palautteessa tietoa, että tenttien siirtyessä verkkoon osa opiskelijoista lähinnä lomaili kun ”materiaalit on tentissä käytettävissä ja tentistä suoriutuminen on helppoa”. Tämä on iso haaste, miten saada tenttiorientoituneet opiskelijat panostamaan asioiden omaksumiseen ja kertaamiseen. Vaikka pyrimmekin tiedon soveltamiseen ja opiskelijoiden itseohjautuvuuteen, lopputentti olisi parasta pitää perinteisesti paperisena, omaa osaamista rauhalliseen tahtiin käyttävänä ja näyttävänä. Ryhmäopetuksissa saimme yksittäisen palautteen, jossa mainittiin artikkelien lukemisen olevan ”turhaa tentin kannalta”. Tenttiorientoituneisuus valitettavasti ohjaa vieläkin vahvasti joidenkin oppimista. Samoin saimme palautetta soveltavista välitenttikysymyksistä, joissa moitittiin kun vastaavaa esimerkkiä ei ollut käyty opetuksessa läpi. Toisin sanoen, kysymyksenasettelu oli onnistunut! Tenttikysymyksissä tosin tulee olla tarkkana, että kysymykset ovat yksiselitteisiä ja sopivalla laajuudella rajattuja, mitaten sitä mitä halutaan mitata.

Koska luennoilla on paljon asiaa ja yksityiskohtia, opiskelijat toivovat että tärkeimmät asiat korostettaisiin koska he eivät ymmärrettävästi osaa priorisoida tietoja. Tenteissä olemme entisestään kiinnittäneet tähän huomiota, pyrkimällä soveltamaan ydinasioiden osaamista ja yhdistelemään tietoa. Hyvien kysymysten laatiminen on vain kovin haastavaa. Ja se tulisi tehdä joka tenttiin uudelleen. Suurten kurssien arviointi on edelleen suuri haaste, joka saattaisi selvittyä vertailemalla hyviä ja huonoja kokemuksia opettajien kesken. Ottakaa yhteyttä!

Evästys muille opettajille

Anna opiskelijoille vastuuta oppimisestaan. Pienessä ryhmässä opiskelijat opettavat ja korjaavat toistensa tietokäsityksiä ja jakavat keskenään uusia näkökulmia. Autenttiset tehtävät innostavat ja sitovat teorian käytäntöön.
Osallista kaikki mukaan aktivoivin ryhmätöin, vaikkapa palapelimenetelmän avulla tai yhteisin pienryhmätehtävin. Luo vapautunut ja rohkaiseva ilmapiiri. Anna selkeät säännöt ja mahdollista kaikkien pelata.


Lähteet:

Gupta, M. Enhancing student performance through cooperative learning in physical sciences. Assessment & Evaluation in Higher Education 2004, 29, 1: 63-73.

Palola, E. Yhteistoiminnallinen oppiminen yliopiston perusopetuksessa – esimerkkinä palapelityöskentely. Yliopistopedagogiikka 2015; 22, 1, sivut 23-26.

Pyörälä E. Paradigman muutos ja aktivoivat oppimismenetelmät lääketieteen koulutuksessa. Yliopistopedagogiikka 2014, 21, 2, sivut 3-15.

Schlegel E, Selfridge N. Fun, collaboration and formative assessment: Skinquizition, a class wide gaming competition in a medical school with a large class. Medical Teacher 2014, 36: 447–449.

Virtanen V, Postareff L, Hailikari T. Millainen arviointi tukee elinikäistä oppimista? Yliopistopedagogiikka 2015, 22, 1, sivut 3-11.

Kirjoittajat:
Laura Vainio ja Johanna Magga
Yliopistopedagogiikan opiskelijat
Oulun yliopisto