synergy induction to pedagogy programme - evaluation of the learning resources (finnish)

Johdatus pedagogiikkaan

Moduuli 5: Oppimisresurssien arviointi

Johdanto

SYNERGY Exchange (http://synergyexchange.eu/)

Luotu “SYNERGY” ERASMUS+ projektille

Projektinumero: 2014-1-IE01-KA202-000355

Moduulin yleiskatsaus & päätavoitteet

OSAT TAVOITTEET

Johdanto Moduulin tarkastelu

Päätavoitteet

Osa 1:

Perusmääritelmä

Perusmääritelmät

Keskeisten arviointiperusteiden

tunnistaminen

Esimerkkejä niiden soveltamisesta

Osa 2:

Helppo tapa arvioida

5 WH- kysymysmallit

Esittely ja täytäntöönpano

Osa 3:

Muut mallit ja työvälineet

MERLOT -malli

LORI -malli

EFQUEL -verkosto

Käytännön vinkit &

loppuhuomautukset

Luo oma arviointikriteeristö






Osa 1: Perusmääritelmät

4

Mitä on arviointi? Arviointi on prosessi, jossa määritellään ansioita, arvoa tai

merkitystä; arviointi on tämän prosessin tuote.

(Scriven 2007)

Mikä on oppimisresurssi?

Informaatio esitettynä, helposti saatavilla tai tallennettuna

eri medioihin tai formaatteihin (teksti, video, ohjelmistot

jne.), joka auttaa oppijaa oppimaan kuten oppimistuloksissa

ja/tai oppimistavoitteissa ollaan märitelty.

PERUSMÄÄRITELMÄT

5

Miksi oppimisresursseja arvioidaan?

Arvioinnin päätarkoitus on arvioida resurssien laatua.

Oppimisresurssien laatu riippuu:

- sen ominaisuuksista ja piirteistä

- kontekstista– kuten aika, paikka ja ihmisuhteet.

Laatu liittyy myös siihen, miten, milloin ja suhteessa kehen

resurssia käytetään.

PERUSMÄÄRITELMÄT

6

Miten arvioimme? Arviointi on yleensä systemaattinen prosessi, ei yksittäinen toiminto, ja perustuu arviointikriteeristöön kuten:

Potentiaalinen tehokkuus oppimisvälineenä Helppokäyttöisyys (ammatinharjoittajille ja oppijoille) Tarkkuus Tarkoituksenmukaisuus Selkeys Valmius …

Katso osasta 2 esimerkki

arviointiprosessista ja

kriteereistä

PERUSMÄÄRITELMÄT

7

ARVIOINNIN KOLME PÄÄKOHTAA

KENELLE KENELTÄ

TEHDÄ MITÄ MISSÄ OLOSUHTEISSA

Kohderyhmät Tavoitteet Rajoitteet

Esimerkki: - 5 hitsaajaa ja 1 ulkopuolinen asiantuntija

Esimerkki: - Osata tyydyttää uuden asiaakkaan tarpeet

Esimerkki: -Lähestyvä deadline -Kouluttajan rajallinen aika - Hyvin kiireinen tuotantoaika

8

MAHDOLLISET TULOKSET KOLMEN KRITEERIN SOVELTAMISESTA

ESIMERKKI 1:

12 nuorta kolmesta yrityksestä

Tilaus: luoda ja toteuttaa yrityksen

nettisivut

Pieni budjetti; erilainen tausta;

kuusi kuukautta aikaa.

KOHDERYHMÄT: - Nuoret, digitaalinen lukutaito

TAVOITTEET eivät ole korkealla (perus-keskitasoa monimutkaisuudessaan)

RAJOITTEET -Aikaa on riittävästi taustan erilaisuudesta huolimatta -Ei ole kiire saada oikeaa kouluttajaa tai resurssia -Riittävät (korkealaatuiset) resurssit voidaan hankkia helposti -Vähemmän kokenut kouluttaja voidaan valmentaa käyttämään niitä

9

Osa 1: KERTAUSKOE

TEKIJÄ KUVAUS RANKING

KOHDERYHMÄ - 7 hallintohenkilöstön jäsentä 2

yrityksestä

- Tekijät: (päätettävä, ei omaa henkilöstöä)

2

1/NA

TAVOITTEET - Valmistele kahden yrityksen

hallintohenkilöstö hoitamaa Venäjän

markkinoita

5

RAJOITTEET -3 kuukautta;

-A2-tason saavuttaminen;

-keskikokoinen-pieni budjetti

4

5

5

Kysymys: Mikä on kaikkein merkittävin tekijä mainittujen

joukossa? (asteikolla 1-5, 5=merkityksellisin)

10



Osa 2: Helppo tapa arvioida




11

Tavoitteet

Syyvällisempi analyysi oppimisresursseista menemättä kuitenkaan liian monimutkaisiin ja aikaa vieviin tutkimuksiin ja valmisteluihin

HELPPO TAPA ARVIOIDA

Sisältö

Soveltaa tunnettua tekstin jäsentämisen mallia arviointiprosessiin, koska se perustuu keskeisiin tekijöihin jotka voivat vastata arvioitavien resurssien avainkohtiin

Ehdottaa mahdollisia parannuksia

12

VIISI KYSYMYSTÄ

Kuka

Mitä

Miksi

Milloin

Missä

• Ketkä ovat oppijoita? (ikä, rooli, tausta jne.) • Kuka on mahdollinen kouluttaja? (sisäinen, ulkoinen

jne.)

• Mitä/millaisia resrusseja he tarvitsevat eniten?

• Ovatko verkkoresurssit heidän helposti saatavilla?

• Mitkä ovat oppimistavoitteet? • Onko kyseessä syntyvä uusi koulutus vai jo suunniteltu koulutus?

• Mikä on koulutuksen suorittamisen määräaika?

• Milloin koulutus suoritetaan?

• Onko yrityksellä tarvittavat tilat ja tarvikkeet

koulutukseen?

• Ovatko tekniset laitteet käytettävissä?

13

VIISI KYSYMYSTÄ - Esimerkki taulukon käytöstä -

Kuka

Mitä

Miksi

Milloin

Missä

• 9 ihmistä iältään 25-47, pääasiassa hallintohenkilöstöä, ei

aiempaa kokemusta projektisuunnittelusta • Ei sisäistä kouluttajaa saatavilla

• He tarvitsevat resursseja projektisuunnitteluun

• Ovat tuttuja verkkoresurssien kanssa (myös enlanniksi )

• Kolme ammatillisen koulutuksen kouluttajaa vailla

koulutusta Erasmus+ projektin suunnittelusta

• Aikaraja 31.3. ja nyt on tammikuu

• Yritystilat eivät ole käytössä

• Kaikilla on omat läppärit/tabletit

14

HELPPO JA EMPIIRINEN TAPA: VIISI KYSYMYSTÄ - Mahdollisia tavoitteita: RESURSSIEN TULEE OLLA…

Tukena ja opastuksena: koulutus valmistaa käyttämään resursseja tukimateriaalina

Verkossa: tarvitaan puitteet ja mallit sopeutumiseen ja hyödyntämiseen

Suoraan todellisiin esimerkkeihin pohjautuvia: ei tarvita paljon teoriaa, vaan todellisia esimerkkejä

15

5 kysymystä- Vastaukset Vaihtoehdot

1. 10 yli 55-vuotiasta matalasti koulutettua

työntekijää siivous- ja puutarhanhoitoalan

yrityksessä

•Verkkoresurssit

videoineen ja

simulaatioineen olisivat

hyvin hyödyllisiä, mutta

eivät ole sopivia

kohderyhmälle;

•Lyhyet kuvitetut lehdykät

listamuotoisin sisällöin ja

tarkistuslistoin voisi olla

parempi vaihtoehto

•Mobiilisisältöjä voidaan

käyttää organisointiin ja

muistin virkistämiseen jos

kohderyhmä voi hyödyntää

2. Turvallisuus ja ensiapukurssi; kahden

opiskelijan tulee valmistua yksikkönsä

“virallisesti vastuussa olevaksi”

3. Turvallisuusvaatimuksiin vastaaminen

riittävässä ajassa (kuukaudessa)

4. Yrityksessä on meneillään hyvin kiireinen

ajanjakso ja se on myöhässä tehtävissään

5. Yrityksessä on luokka- ja tietokonehuoneita

Harjoitus 1: Etsi oikea resurssi

16


Moduuli 5: Oppimisresurssien arvioiminen

Osa 3: Muut mallit ja työkalut SYNERGY Exchange (http://synergyexchange.eu/)



17

Sisältö Tarjoaa kriteerit oppimisresurssien laadun arviointiin. Kriteeristöt kuuluvat seuraaviin työkaluihin: o MERLOT o LORI Tutustutaan e-oppimisresurssien mahdollisuuksiin ja saatavilla oleviin palveluihin EFQUEL-verkon kautta.

Tavoitteet Analysoida valittujen oppimisresurssien laatukriteereitä, ja

selvittää mikä niistä vastaa parhaiten tunnistettuja tarpeita

ARVIOINTIMALLIT JA TYÖKALUT

18

MERLOT

www.merlot.org

Merlot (Multimedia Education Resource for Learning and Online Teaching) on tietolähde, joka sisältää opetusresursseja, jotka on jaoteltu seitsemään laajaan aiheryhmään:

1. Taide

2. Liiketoiminta

3. Koulutus

4. Humanistiset tieteet

5. Matematiikka ja tilastotieteet

6. Tiede ja teknologia

7. Yhteiskuntatieteet

http://www.merlot.org/

19

MERLOT LAATUKRITEERISTÖ

Arviointistandardit Avainkysymykset

Sisällön laatu

1. Esittääkö resurssi päteviä (oikeita) käsitteitä, malleja ja taitoja?

2. Esittääkö resurssi koulutuksellisesti merkittäviä käsitteitä, malleja ja taitoja tieteenalalle?

Mahdollinen vaikuttavuus

opetus/oppimisvälineenä

1. Missä oppimisprosessin/ syklin vaiheessa

materiaalia voitaisiin käyttää ?

2. Mitkä ovat oppimistavoitteet? Mitä opiskelijoiden pitäisi pystyä tekemään onnistuneen opiskelun jälkeen? Mitkä ovat oppijan ominaisuudet ?

Käytettävyys

1. Kuinka helppoa opettajien ja

opiskelijoiden on käyttää ohjelmistoa

ensimmäistä kertaa?

20

LORI LAATUKRITEERISTÖ

LORI on peräisin e-LERAsta

eLera on avoin yhteisö, joka tutkii ja arvioi verkko-oppimista. He ovat erityisen kiinnostuneita oppisisältöihin, e-portfolioihin sekä oppimisen suunnittelun määrittelyihin sekä niihin liittyviin asioihin eLera tarjoaa työkaluja ja informaatiota oppisisältöjen arviointiin ja tutkimiseen, ylläpitää tietokantaa oppisisältöjen arvosteluista, sekä tukee kommunikaatiota ja yhteistyötä verkko-oppimisresurssien tutkijoiden, arvioijien ja käyttäjien kesken.

21

LORI 9 LAATUMÄÄRITETTÄ – ensimmäiset viisi

1. Sisällön laatu

Totuudenmukaisuus, tarkkuus, ideoiden tasapainoinen

esitys, ja sopiva yksityiskohtien määrä

2. Oppimistavoitteiden

kohdistaminen

Oppimistavoitteiden, toiminnan arvioinnin ja oppijan

ominaisuuksien kohdistaminen

3. Palaute ja

sopeutuminen

Sisällön mukauttaminen oppijoiden palautteen

pohjalta.

4. Motivaatio Kyky motivoida ja herättää tunnistetun

oppijakohderyhmän kiinnostus

5. Esityksen

suunnittelu

Visuaalisen ja auditiivisen tiedon suunnittelu

parantamaan oppimista ja tehostamaan mentaalista

prosessointia

22

LORI 9 LAATUMÄÄRITETTÄ – loput neljä

6. Vuorovaikutuksen

käytettävyys

Navigoinnin helppous, käyttöliittymän ennustettavuus

ja käyttöliittymän aputoimintojen laatu

7. Saavutettavuus Hallintalaitteiden ja esitysmuotojen suunnittelu

huomioimaan vammaiset ja mobiilioppijat.

8.

Uudelleenkäytettävyys

Mahdollisuus käyttää vaihtelevissa

oppimisympäristöissä ja eritaustaisten oppijoiden

kanssa.

9. Standardien

noudattaminen

Noudattaa kansainvälisiä standardeja ja teknisiä

määräyksiä.

23

EFQUEL

www.efquel.org

http://www.efquel.org/

24

EFQUEL

25

Osa 3: KERTAUSKOE

Virallisen todistuksen antaminen

Vapaus

Kohderyhmän tarpeiden kohtaaminen

Hyväksytyn virasnomaisen vahvistus

Helppokäyttöisyys

Suunniteltu uudelleen käytettäväksi

On mukautuva ja palautetta antava

Kysymys 1 Valitse alla olevasta listasta, mitkä ovat oppiresurssien laatukriteereitä

analysoitujen kahden mallin mukaisesti (TOTTA/VÄÄRIN):

TOTTA

VÄÄRIN

TOTTA

VÄÄRIN

TOTTA

VÄÄRIN

TOTTA

26

LÄHTEET

o www.merlot.org

o Scriven, M. (2007). The logic of evaluation. In H.V. Hansen, et. al.(Eds),

Dissensus and the Search for Common Ground, CD-ROM (pp. 1-16).

Windsor, ON: OSSA.

o Leacock, T. L., & Nesbit, J. C. (2007). A Framework for Evaluating the

Quality of Multimedia Learning Resources. Educational Technology &

Society, 10 (2), 44-59.

o Prince Edward Island Department of Education (2008). Evaluation and

Selection of Learning Resources: A Guide, Charlottetown, Prince

Edward Island - Canada - http://www.gov.pe.ca/educ o Student Achievement and Supports Branch Saskatchewan Ministry of

Education (2013). Learning Resources Evaluation Guidelines,

Saskatchewan Ministry of Education – Canada,

http://www.wncp.ca/media/49329/wncptool_%20assessing_validating.pdf

http://www.merlot.org/

http://www.gov.pe.ca/educ

http://www.gov.pe.ca/educ

http://www.wncp.ca/media/49329/wncptool_ assessing_validating.pdf

27



Yhteenveto – Loppuhuomautukset




28

YHTEENVETO – LOPPUHUOMAUTUKSET

Olemme käyneet läpi oppimisresurssien arvioinnin erilaisia malleja. Alussa

kartoitimme keskeisi, huomioonotettavia asioita, sekä kävimme läpi empiirisen tavan tehdä alustavaa arviointia. Mutta jokainen oppi on mukautettava omaan todellisuuteen ja konkreettiseen tilanteeseen: ehdotuksemme on, että

LUO OMA TAULUKKOSI asioista, jotka ovat kaikkein tärkeimpiä SINUN tarpeisiisi with the items that are the most relevant for YOUR needs, for examples, as a check list. Nyt tiedät perusteet; se ei ole vaikeaa. Mutta MUISTA:

Paranna aina työkaluasi saamasi palautteen perusteella!

29

ONNEKSIOLKOON! Olet suorittanut moduulin

Tieto tärkeimmistä huomioonotettavista näkökohdista arvioitaessa oppiresurssien laatua.

Kyky arvioida oppimisresurssien laatua ja tehdä tasapaino eri tekijöiden välillä.

facebook.com/pages/Synergy-for-the-SME-Business-Community

www.projectsynergy.eu http://synergyexchange.eu/

www.linkedin.com/company/erasmus-synergy-project

http://www.projectsynergy.eu/

http://synergyexchange.eu/

http://synergyexchange.eu/