• Ei tuloksia

Case-asiantuntijan haastattelun luotettavuustarkastelu

9 OPETUSKOKEILUN ARVIOINTIA

10.2 Case-asiantuntijan haastattelun luotettavuustarkastelu

Hirsjärvi ja Hurme (1980, 142–144; 2008, 188–190) esittelevät laadulliseen tutkimukseen ja erityisesti teemahaastatteluun sopivia validiteettiin ja reliabiliteettiin liittyviä luotettavuus-kriteereitä, joista tämän tutkielman haastattelun kannalta oleellisimpia ovat käsitevalidius, sisältövalidius, rakennevalidius, reliaabelius liittyen tutkijan toimintaan sekä haastateltavan valinta. Näiden lisäksi arvioin haastattelun ja siitä tehtyjen johtopäätösten luotettavuutta Es-kolan ja Suorannan (1998, 211, 212) esittelemien osittain edellä mainittujen luotettavuuskri-teerien kanssa osittain lomittaisia luotettavuuskäsitteitä siirrettävyys, varmuus sekä vahvis-tuvuus sekä Gaskellin ja Bauerin (2000, 346–348) luotettavuuskäsitteitä vuorovaikutteinen vahvistaminen (Communicative validation), läpinäkyvyys ja menettelyllinen selkeys (Trans-parency and procedural clarity) sekä tiheä kuvailu (thick description).

Tutkittavan ilmiön olennaisten piirteiden sekä siihen liittyvien keskeisten käsitteiden tunnis-taminen ja havaitseminen on käsitevalidiuden kriteeri. Käsitevalidiutta voidaankin parantaa etukäteen haastateltavaan sekä ilmiön käsitteistöön ja kielenkäyttöön tutustumalla. Ennen haastattelua ilmiöstä aiemmin tehtyyn (tutkimus)kirjallisuuteen perehtyminen parantaakin tutkimuksen käsitevalidiutta. Käsitevalidius on siten luotettavuustekijä, jota ei voi jälkikä-teen parantaa. (Hirsjärvi & Hurme 1980, 143.) Tässä tutkielmassa käsitevalidiutta lisää taus-tatutkimus, jonka tein eri asiantuntijoille laskinten käytöstä alakoulussa. Kyseinen taustatut-kimus ja siihen liittyvä teoriatarkastelu (Huusko 2014) laajensivat ymmärrystäni aiheen kan-nalta keskeisistä käsitteistä ja lisäsi kokonaisvaltaisesti myös teoriapohjaista tietoani ilmi-östä ja siihen liittyvistä tekijöistä.

Sisältövalidius taas tarkoittaa teemahaastattelun teemojen ja alustavien haastattelukysymys-ten laadinnan luotettavuutta. Sisältövalidius saavutetaan, kun kysymykset tavoittavat tutki-musaiheen kannalta halutut merkitykset. (Hirsjärvi & Hurme 1980, 143.) Toisin sanoen täl-löin haastattelussa käytetyt teemat ja haastattelukysymykset vastaavat varsinaiseen tutki-muskysymykseen eli tutkivat sitä mitä oli tarkoituskin. Omassa tutkielmassani sisältövali-diutta paransi haastattelurunko, jossa olin muotoillut useita teemaan liittyviä alustavia haas-tattelukysymyksiä ja alateemoja. Nämä teemat oli kerätty osittain suoraan asiantuntijoiden käsityksistä nousseista tekijöistä, joten ne liittyivät suoraan tarkoitettuun ilmiöön. Hyvin jär-jestetyn teemarungon avulla pystyin myös viemään keskustelua takaisin haastattelurungon kysymyksiin, mikäli se tuntui karkaavan tutkimusaiheen kannalta epäolennaisiin asioihin.

Hirsjärvi ja Hurme (2008, 187, 189) lainaavat Cookia ja Campbellia esittäessään yhdeksi tutkimuksen kannalta oleelliseksi validiteettikriteeriksi rakennevalidiutta. Rakennevalidius liittyy edellä mainittuihin käsitevaliditeetin ja sisältövaliditeetin käsitteisiin, sillä se kuvaa tutkimuksen suhdetta sen oletettuun tutkimustehtävään muun muassa sen käsitteiden vastaa-vuudella tutkittavaan ilmiöön. Tutkijan onkin dokumentoitava ja perusteltava tarkasti kaikki analyysin vaiheet ja päätökset, jotka johtivat aineiston luokittamiseen ja kuvailuun juuri ky-seisellä tavalla. (Emt., 189; Saari 1994, 165.) Tätä samaa luotettavuustuntomerkkiä kuvaavat Gaskellin ja Bauerin (2000, 346–347) käsitteet Läpinäkyvyys ja menettelyllinen selkeys sekä Tiheä kuvailu. Tutkijan on pyrittävä raportoimaan tutkimustilanne, aineiston keruuseen liit-tyvät yksityiskohdat sekä analyysin kulku mahdollisimman tarkasti (emt., 346–347). Raken-nevaliditeetin parantamiseksi olenkin pyrkinyt kuvaamaan mahdollisimman selkeästi ja

to-tuudenmukaisesti aineiston keräämisen sekä analyysin vaiheet sekä niiden aikana tehdyt lop-putuloksen kannalta oleelliset päätökset. Olen myös käyttänyt suoria sitaatteja, jotka tuovat asiantuntijan omaa ääntä kuuluville ilman mahdollisesti niiden alkuperäistä ajatusta heiken-täviä välitulkintoja.

Reliaabelius suhteessa tutkijan toimintaan taas kuvaa siitä, kuinka luotettavasti tutkija on onnistunut analysoimaan aineistonsa. Tähän liittyy muun muassa kysymys siitä, onko tutkija todella huomioinut kaiken aineistossa ilmenneen oleellisen tiedon. Tavoitteena on, että tulos kuvaisi tutkittavan ajatusmaailmaa mahdollisimman tarkasti. (Hirsjärvi & Hurme 2008, 189.) Jos tutkijan työskentely ei ole reliaabelia, myös aineistosta tehdyt johtopäätökset voi-vat olla virheellisiä. Tällöin tutkija saattaa jättää huomiotta esimerkiksi aineiston negatiiviset osuudet suhteessa tutkittavaan ilmiöön. (Hirsjärvi & Hurme 1980, 144.) Oman toimintani reliaabeliuden parantamiseksi olenkin pyrkinyt tässä tutkielmassa mahdollisimman lä-pinäkyvään kuvaukseen analyysin vaiheista. Olen myös sisällyttänyt tutkielmani liitteisiin miellekartan (liite 3), joka pitää sisällään kaikki aineistosta nostamani merkitysyksiköt. Näin lukija voi seurata, mitä tekijöitä olen korostanut lopullisen mallin luomisessa, ja mitkä tekijät olen jättänyt mallista pois. Lähetin myös mallin haastateltavan arvioitavaksi (communicative validation, Gaskell & Bauer 2000, 348), ja koska hän hyväksyi sen, vastaa se siis ilmeisesti hyvin haastateltavan käsityksiä aiheesta.

Haastateltavan valintaan liittyy kaksi luotettavuuskriteeriä: tutkijan tulisi haastatella riittä-västi tapauksia sekä huolehtia, että haastateltavat ovat tutkimusaiheen kannalta hyvin valit-tuja (Hirsjärvi & Hurme 1980, 143–144). Ensin mainittu luotettavuustekijä ei omassa tut-kielmassani toteudu. Olisinkin saanut todennäköisesti laajemman ja kattavamman kuvan las-kinten käyttöön liittyvistä tekijöistä, mikäli haastateltavina olisi ollut useampi kuin yksi asi-antuntija. Alun perin tämä olikin tarkoitus, mutta jouduin luopumaan siitä aikataulullisista syistä. Näin ollen luomani malli on vain eräs yksittäinen käsitys tutkittavasta aiheestani, jonka tavoitteena oli syventää asiantuntijoiden käsityksistä saamaani tietoa sekä antaa viit-teitä ja suuntaa opetuskokeilun suunnitteluun ja toteutukseen. Jälkimmäisen kriteerin toteu-tumista puoltavat saamani tulokset, jotka vastaavat tutkimuskysymykseen ja haastattelun ta-voitteeseen hyvin. Valitsinkin haastateltavakseni henkilön, joka soveltuisi tehtävään mah-dollisimman hyvin. On kuitenkin muistettava, että ihmisten käsitykset asioista eivät ole py-syviä, vaan saattavat muuttua lyhyenkin ajan kuluessa (Hirsjärvi & Hurme 2008, 189). Näin

ollen teemahaastattelun tulos on sidottu sekä yhteen henkilöön että myös tutkimuksen ajan-kohtaan.

Siirrettävyys tarkoittaa tutkimustulosten yleistettävyyttä (Eskola & Suoranta 1998, 211–

212). Siirrettävyys ei kuitenkaan toteudu tutkimuksessani sen luonteen ja tavoitteiden vuoksi. Tässä suhteessa ainoa luotettavuutta heikentävä tekijä voikin olla se, etten ole tuonut riittävästi esille tätä tuloksen ainutkertaisuutta ja tapauskohtaisuutta, jolloin lukija erehtyy luulemaan tulosta yleistettäväksi. Toisaalta on myös mahdollista, että olen kiintynyt aineis-toon ja siitä luomaani malliin, jolloin olen voinut tehdä mallin pohjalta johtopäätöksiä, joita ei tapauksen ainutkertaisen luonteen kannalta olisi voinut tai kannattanut tehdä. Vahvistu-vuus taas tarkoittaa, että tehdyt tulkinnat saavat vahvistusta aiemmin tehdyistä tutkimuksista (emt., 212). Haastattelun tulos saikin vahvistusta monilta osin asiantuntijoiden käsityksistä, johon se kytkeytyikin hyvin vahvasti.

Varmuus laadullisessa tutkimuksessa tarkoittaa, että tutkija on ottanut huomioon omat en-nakko-oletuksensa (Eskola & Suoranta 1998, 212). Olenkin koko tutkimusprosessin ajan pyrkinyt tiedostamaan, mitkä ovat ennakko-oletukseni ja käsitykseni aiheesta ja miksi ajat-telen asiasta, kuten ajatajat-telen. Tämän itsereflektion avulla olen pyrkinyt kontrolloimaan omien asenteiden ja arvojeni vaikutusta aineiston analyysiin ja tulkintaan. Olen myös avan-nut ennakkokäsityksiäni, jotta lukija voi peilata niitä silmälläpitäen tehtyjä tulkintoja ja nii-den luotettavuutta.