Heuristinen arviointi toteutettiin liitteessä III kuvattujen heuristiikkojen avulla. Kun-kin suunnitteluohjeen kohdalla arvioitiin, toteutuuko se ForestBioFacts-oppimisym-päristössä. Mikäli ohje ei toteutunut, arvioitiin siitä mahdollisesti aiheutuva virhe ja sen vakavuusaste. Tähän kappaleeseen on koottu heuristiikkakohtaisesti tehdyn ar-vioinnin tulokset. Taulukoissa 315 on korostettu keltaisella huomiovärillä ensimmäi-sen käytettävyystestaukensimmäi-sen kannalta merkittävimmät käytettävyysongelmat.
Palvelun tila
Palvelun tilaa arvioitaessa selkeiksi käytettävyysongelmiksi ja virhelähteiksi nousivat sivurakenteen ja navigaation ongelmat (taulukko 3). Esimerkiksi sisällysluetteloraken-teen kautta ei kyennyt loogisesti liikkumaan oppimisympäristössä. Arvioijat kokivat hankalaksi hahmottaa, missä osassa järjestelmää ovat ja mihin pitäisi edetä. Järjes-telmä ei toiminut odotetulla tavalla, koska osasta rakennetta puuttuivat muun mu-assa sivulta toiselle johtavat sivunuolet, tai linkitys artikkelista/osiosta toiseen ei toi-minut. Myöskään järjestelmän eri tasoja ei vielä voinut erottaa toisistaan, koska Ad-vanced-tason materiaalia ei ollut. Ensimmäisessä käytettävyystestauksessa eri taso-jen puuttumista ei kuitenkaan koettu sinänsä ongelmaksi.
Taulukko 3. Palvelun tila -heuristiikan arviointi ForestBioFacts-oppimisympäristön pilottiversiossa
Yhteensopivuus järjestelmän ja todellisen maailman välillä
Yhteensopivuus järjestelmän ja todellisen maailman välillä -heuristiikan kohdalla merkittävimmäksi käytettävyysongelmaksi havaittiin se, että ikonipainikkeiden (esim. osaamistavoitteet ja lähdeluettelo) selitystekstit puuttuivat, jolloin oli vaikea ymmärtää ikonin merkitystä (taulukko 4). Heuristisen arvioinnin ajankohtana haku-toiminto oli vielä keskeneräinen. Hakutoiminnolla löydetyt tulokset eivät olleet loo-gisessa järjestyksessä, eikä järjestelmä korostanut löydettyjä hakusanoja tekstissä.
Arvioinnin yhteydessä havaittiin hakutoiminnon ongelmien heijastuvan koko oppi-misympäristön käyttöön negatiivisesti. Oppimisympäristössä käytetyn kielen ja tie-don loogisen jäsentelyn arviointi oli hankalaa, ja se jätettiin käytettävyystestauksessa selvitettäväksi.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
1 Palvelun tila
1.1 Käyttäjä saa tietoa, jonka perusteella hän voi päätellä järjestelmän toimivan oikein.
Ei toimi Vähäinen Tätä vielä tarkasteltava
1.2 Järjestelmä on selkeä. Ok - Suunnittelijoiden näkökulmasta
kyllä 1.3 Käyttäjä tietää, missä osassa
järjestelmää on ja miten edetä /mitä voi tehdä seuraavaksi.
Ei toimi Katastrofaalinen Prosessijana / sivuhakemiston kautta navigointi ei onnistu 1.4 Käyttäjä kykenee erottamaan
järjestelmän eri tasot toisistaan.
Ei toimi Merkittävä Alustassa vasta perustason tekstiä, tasoerotteluun on suunniteltu tuplaviivamerkinnät 1.5 Järjestelmä toimii odotetulla tavalla
eikä tee mitään yllättävää.
Ei toimi Katastrofaalinen Ongelmat navigaatiossa ja linkityksissä. sivunuoliohjaukset (puuttuvat)
1.6 Käyttäjä näkee tai kuulee jokaisen tekemänsä toimenpiteen tuloksen.
Ok - Ei jää merkintää sivurakenteeseen
siitä, missä on jo käynyt 1.7 Järjestelmä antaa riittävästi palautetta
käyttäjälle palvelun tilasta ja siitä, mitä tapahtuu (esim. haun tai videoiden latautumistilanteen).
Ei toimi Ei koeta ongelmaksi
Ei pysty vielä arvioimaan
1.8 Linkit, ikonit ja kuvakkeet toimivat. Ei toimi Katastrofaalinen Linkkejä ei vielä määritelty
Taulukko 4. Yhteensopivuus järjestelmän ja reaalimaailman välillä -heuristiikan arviointi ForestBioFacts-oppimisympäristön pilottiversiossa
Käyttäjän kokema hallinnan ja vapauden tunne
Navigointiongelmat heijastuivat huomattavasti käyttäjän kokemaan hallinnan ja va-pauden tunteeseen heuristisen arvioinnin aikana (taulukko 5). Navigoinnin ja sivura-kenteen hankaluudet eivät vahvistaneet sitä tunnetta, että järjestelmä on käyttäjän hallinnassa. Oppimisympäristön ominaisuuksia pystyi kokeilemaan turvallisesti, koska järjestelmää käytettäessä ei ollut mahdollista tehdä peruuttamattomia toimin-toja. Tärkeimmille sivuille oli nopea ja helppo pääsy; esimerkiksi oppimisympäristön etusivulle pääsi yläpalkin logon kautta ja lähes kaikilta sivuilta löytyi sisällysluettelo ja navigointipainikkeet. Oman hankaluutensa asiaan toi se, että vaikka erilaiset painik-keet löytyivät, ne eivät aina toimineet tai ohjanneet haluttuun paikkaan, mikä hanka-loitti myös mahdollisuutta palata takaisin edelliseen tilaan.
Heuristiikka Toiminta Virheen
vakavuusaste
Kommentit 2 Yhteensopivuus järjestelmän ja
todellisen maailman välillä 2.1 Järjestelmässä käytetty kieli on
ymmärrettävää ja selkeää.
Ei arviota Ei koeta ongelmaksi
Sisällön tuottaminen vielä työnalla -> kielenä brittienglanti
Valikkojen, teemojen yms. nimet?
2.2 Järjestelmän toiminnoissa yms.
käytetään käyttäjän kieltä, ei e-Learning -asiantuntijoiden.
Ei arviota Ei koeta ongelmaksi
Selviää käytettävyystestissä
2.3 Vaikeille termeille ja sanoille on tarjottu selitykset.
Ok - Tärkeimmille termeille
sanaselitykset 2.4 Symbolit, ikonit ja kuvakkeet ovat
helppotajuisia ja yksiselitteisiä.
Ei toimi Merkittävä Ikonien selitystekstit puuttuvat, näiden toivotaan tuovan selkeyttä asiaan
2.5 Tieto on jäsennelty loogisesti. Ok - Järjestelmässä erilaisilla tiedoilla ja ominaisuuksilla on oma looginen paikkansa. Myös sisällön ja rakenteen loogista esitystä ja etenemistä suunniteltu.
2.6 Hakutoiminto antaa relevantteja tuloksia ja korostaa hakusanat.
Osittain Katastrofaalinen Hakutoiminto ei vielä täydellisessä muodossaan (sisältöä vähän, vaikea arvioida)
Taulukko 5. Käyttäjän kokema hallinnan ja vapauden tunne -heuristiikan arviointi Fo-restBioFacts -oppimisympäristön pilottiversiossa
Yhteneväisyys ja standardit
Yhteneväisyys ja standardit -heuristiikan vaatimukset arvioitiin ForestBioFacts-oppi-misympäristössä täyttyvän kokonaisuudessaan hyvin (taulukko 6). Oppimisympäris-töä oli kehitetty yhteistyössä toimijan kanssa, jolla on vahva kokemus sähköisistä op-pikirjoista ja oppimateriaalituotannosta, joten erilaiset järjestelmäkehityksen stan-dardit ja ohjeet sisältyivät projektiin alusta asti. Myös oppimisympäristön graafinen suunnittelu oli tehty ammattilaisen toimesta, jolloin myös oppimisympäristön ulko-asu ja erilaiset visuaaliset elementit oli suunniteltu web-design-ohjeiden mukaan. Fo-restBioFacts-oppimisympäristön rakenne, toiminnot ja näkymät oli luotu yhtenäisiksi ja selkeiksi. Samat toiminnot toistuivat artikkelista toiseen; ainoastaan artikkelin si-sältö sekä mahdollinen teemaväri vaihtelivat. Heuristisen arvioinnin tehneiden pro-jektiryhmän jäsenten mielestä järjestelmän logiikka oli helppo hahmottaa.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
3 Käyttäjän kokema hallinnan ja vapauden tunne
3.1 Käyttäjä kokee hallitsevansa järjestelmää.
Ei toimi Katastrofaalinen Navigaatiot eivät toimi 3.2 Järjestelmä toimii kuten käyttäjä haluaa. Ei toimi Katastrofaalinen Navigaatiot eivät toimi 3.3 Käyttäjä on aina selvillä siitä, mitä on jo
tehty ja mitä pitää tehdä seuraavaksi.
Ei toimi Vähäinen Olisiko mahdollista / tarpeellista saada materiaaliin näkyviin mitä osioita on jo luettu?
3.4 Tärkeimmille sivuille pääsee nopeasti ja helposti (esimerkiksi etusivu).
Ok - Yläpalkin logosta pääsee
etusivulle, teemalogosta teeman etusivulle yms.
3.5 Jokaisella sivulla on vaadittavat navigointipainikkeet tai "previoius, next, home".
Ei toimi Katastrofaalinen Painikkeet ehkä on, mutta ohjaukset eivät kunnossa 3.6 Tuotteen ominaisuuksia voi kokeilla
turvallisesti.
Ok - Järjestelmässä ei voi tuhota
mitään tai tehdä muutoksia 3.7 Käyttäjä voi aina palata takaisin
edelliseen tilaan tai järjestelmän aloitussivulle.
Ei toimi Katastrofaalinen Navigaatiot eivät toimi
3.8 Käyttäjän tehdessä virheen, hän voi poistua järjestelmästä helposti ja poistumistie on selvästi merkitty.
Ei toimi Vähäinen Uloskirjautuminen puuttuu. Ainut vaihtoehto on sulkea
oppimisympäristö selaimen x:stä.
Taulukko 6. Yhteneväisyys ja standardit -heuristiikan arviointi ForestBioFacts-oppi-misympäristön pilottiversiossa
Virheiden estäminen
Myös virheiden estämisen vaatimukset toteutuivat heuristisen arvioinnin näkökul-masta ForestBioFacts-oppimisympäristössä hyvin (taulukko 7). Osittain tämä johtui siitä, että oppimisympäristössä ei ylipäänsä ollut mahdollista tehdä järjestelmän kan-nalta vakavia virheitä. Varsinaisesti ainoastaan oppimisympäristön hakukenttään pystyi syöttämään tekstiä. Järjestelmä tosin ei ehdottanut vaihtoehtoisia hakuter-mejä, mikäli se ei tunnistanut käyttäjän syöttämää sanaa. Kaikki ForestBioFacts-oppi-misympäristön valikot, listat, linkit ja painikkeet olivat sellaisia, että niitä pystyi käyt-tämään hiiren avulla.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
4 Yhteneväisyys ja standardit
4.1 Järjestelmä noudattaa alan standardeja ja/tai järjestelmän vuorovaikutus on suunniteltu kohdeyleisön ja sisällön kannalta sopivaksi.
Ok - Järjestelmää suunniteltu ja
toteutettu ammattilaisten kanssa 4.2 Järjestelmän jokaisessa osassa on käytetty
samaa käytäntöä/tyyliä (tai standardia).
Ok - Pyritty yhtenäisyyteen kautta
järjestelmän 4.3 Järjestelmän logiikka on helppo hahmottaa. Ok - Sivurakenne ja valikot 4.4 Samat sanat, lauseet, tilanteet tai toiminnot
tarkoittavat samaa läpi koko järjestelmän.
Ok - Pyritty yhtenäiseen kieleen ja
fraaseihin 4.5 Värejä on käytetty yhtenäisellä tavalla kautta
koko järjestelmän.
Ok - Jokaisella teemalla oma värinsä
4.6 Ikoneja, kuvia ja grafiikkaa on käytetty yhtenäisellä tavalla kautta koko järjestelmän.
Ok - Ikonit toistuvat, kuvat samalla
tavalla saman kokoisina yms.
4.7 Näytöt ovat yhtenäisiä kautta koko järjestelmän. Ok - Sama tyyli ja ominaisuudet toistuvat
4.8 Valikot ja sivupuurakenteet ovat yhtenäisiä kautta koko järjestelmän.
Ok Sama sivurakenneominaisuus ja
valikot koko järjestelmässä 4.9 Fonttityypit ja -koot ovat yhtenäisiä kautta koko
järjestelmän.
Ok - Yhtenäisten fontit sekä otsikoissa että leipätekstissä
4.10 Linkkitekstit eri sivuille ovat yhteneväisiä niiden kohdesivujen otsikoiden kanssa.
Ok - Pyrkimys nimetä linkit vastaamaan
kohdesivujen otsikointia /aihetta
Taulukko 7. Virheiden estäminen -heuristiikan arviointi ForestBioFacts-oppimisym-päristön pilottiversiossa
Muistikuorman vähentäminen
Heuristisen arvioinnin tehneet projektiryhmän jäsenet kokivat, että ForestBioFacts-oppimisympäristöä oli mahdollista oppia käyttämään nopeasti ilman varsinaisia käyt-töohjeita (taulukko 8). Järjestelmä ei sisältänyt sellaisia vaikeita tai monimutkaisia toiminnallisuuksia, jotka vaatisivat käyttäjältä aiemmin tapahtuneen toiminnan muis-tamista. Arvioinnin suorittaneiden henkilöiden näkemyksen mukaan käyttäjän oli helppo tunnistaa erilaiset valikot ja painikkeet. Ainoastaan ikonien kohdalla heräsi ajatus siitä, ymmärtäisikö käyttäjä ikonia katsoessaan sen, mitä ikonin on tarkoitus-esittää. Sisällön ja toiminnallisuuksien puutteet nostivat esiin vakavia virhelähteitä.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
5 Virheiden estäminen
5.1 Järjestelmä tukee käyttäjää siten, että vakavien virheiden tekeminen (esimerkiksi tärkeiden tietojen poistaminen) on vaikeaa.
Ok - Tietoja ei pysty poistamaan tai
järjestelmässä muuttamaan mitään peruuttamattomasti 5.2 Virheet on estetty hyvin esimerkiksi
tarkistuskysymyksillä (Haluatko varmasti poistua? tms).
Ei toimi Vähäinen Tästä ei ole vielä keskusteltu -->
haun yhteyteen tulossa ehdotuksia
5.3 Käyttäjä kykenee tarkistamaan syöttämänsä tiedon ennen toimeenpanoa.
Ok - Tietoja syötetään vain
hakukenttään 5.4 Järjestelmä tarjoaa hiirikäyttöisiä listoja,
alasvetovalikoita, hyperlinkkejä ja ikoneja (eli ei tarvitse käyttää
näppäimistökomentoja tms.)
Ok - Kaikki valikot, linkit, ikonit ja painikkeet käytettävissä hiirellä
Taulukko 8. Muistikuorman vähentäminen -heuristiikan arviointi ForestBioFacts-op-pimisympäristön pilottiversiossa
Käytön tehokkuus ja joustavuus (myös saavutettavuus)
Käytön tehokkuutta ja joustavuutta arvioitaessa, arvioitiin samalla myös oppimisym-päristön saavutettavuutta (taulukko 9). Ensimmäisen käytettävyystestauksen näkö-kulmasta eri tasojen, oikopolkujen ja modifioitavuuden vaatimus ei ollut merkityksel-linen, vaikka näiden asioiden puuttuminen valmiista tuotteesta tunnistettiin mahdol-liseksi ongelmaksi. Saavutettavuuden näkökulmasta oppimisympäristö ei heuristisen arvioinnin yhteydessä toiminut optimaalisesti. Ensimmäisessä käytettävyystestauk-sessa saavutettavuutta ei vielä kuitenkaan tarkasteltu. Valmiin tuotteen kohdalla saa-vutettavuusvaatimuksista ei voida kuitenkaan tinkiä, sillä ne perustuvat lakiin.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
6 Muistikuorman vähentäminen 6.1 Kaikki tarvittava on esillä järjestelmän eri
näytöillä.
Ei toimi Katastrofaalinen Sisätöä puuttuu, prosessijana, learning goals, refereces &
authors, teemavalikko, yläpalkki ja siitä avautuva valikko.
Sivuhakemistossa ei näy kaikki 6.2 Järjestelmän käyttöohjeet ovat saatavilla
/näkyvillä.
Ei toimi Vähäinen Ei ohjeistusta -> WP-Alusta monille verkkokäyttäjille tuttu, ei vaadi paljon opastusta 6.3 Sivurakennepuut yms. ovat näkyvillä. Ei toimi Merkittävä Eivät vielä kunnossa 6.4 Järjestelmän kanssa pääsee alkuun
helposti ja uusia asioita oppii käyttämällä.
Ok - Järjestelmä vaikuttaa helposti
opittavalta. Ei vaikeita toiminnallisuuksia.
6.5 Järjestelmä tukee käyttäjän oletuksia/aiempaa tietoa vastaavista järjestelmistä.
Ok - WP-alusta monille tuttu
Kirjamainen rakenne 6.6 Käyttäjän on helppo tunnistaa valikot ja
toimintopainikkeet.
Ok - Painikkeet ja valikot näkyvillä ja
melko pitkälle normien mukaiset
-> tunnistetaanko ikonit ja ymmärretäänkö niiden merkitys 6.7 Järjestelmän käyttäminen ei vaadi
järjestelmän eri osioiden ja niissä aiemmin tapahtuneen toiminnan muistamista.
Ok - Jokainen artikkeli oma yhtenäinen
kokonaisuutensa, muoto toistuu samana.
6.8 Käyttäjä voi merkitä läpikäymänsä järjestelmän osiot luetuksi.
Ei toimi Vähäinen Ei toimi vielä -> pystyykö toteuttaman helposti automaattisesti
Taulukko 9. Käytön tehokkuus ja joustavuus -heuristiikan (sekä saavutettavuuden) ar-viointi ForestBioFacts-oppimisympäristön pilottiversiossa.
Esteettinen ja minimalistinen suunnittelu
Esteettisen ja minimalisten suunnittelun -heuristiikkaa arvioitaessa merkittäväksi käytettävyysongelmaksi nousi ainoastaan leipätekstin pieni fonttikoko sekä se, että toistaiseksi eri sisältökomponentteja (esim. teksti, kuva, taulukot, videot) oli vähän ja niiden välinen tasapaino vaihteli (taulukko 10). Käytettävyystestausta ajatellen moni-puolista materiaalia oli kuitenkin riittävästi. Erityisesti heuristisessa arvioinnissa kiin-nitettiin huomiota siihen, että oppimisympäristön visuaalinen ilme vaikutti tasapai-noiselta ja rauhalliselta. Käyttäjä saattoi halutessaan sulkea sivurakenteen sekä muut valikot ja toiminnallisuudet, jolloin näkyviin jäi vain artikkeli sisältöineen.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
7 Käytön tehokkuus ja joustavuus (myös saavutettavuus)
7.1 Järjestelmä tarjoaa erilaisia tasoja eri käyttäjäryhmille (noviisit, ekspertit).
Ei toimi toistaiseksi
Vähäinen Sisällössä tulee olemaan Basic- ja Advanced -tasot -> nyt vasta Basic 7.2 Aloitteleva käyttäjä saa järjestelmältä
riittävästi tukea.
Ei toimi toistaiseksi
Ei koeta ongelmaksi
Tukea ei välttämättä tarvita 7.3 Kokeneille käyttäjille tarjotaan
oikopolkuja järjestelmään
Näitä tulee pohtia lisää kun materiaalia enemmän 7.4 Oikopolut eivät sekoita aloittelevaa
käyttäjää.
Ei toimi toistaiseksi
Ei koeta ongelmaksi
Käytön ohjeistus tulossa, ei toimi vielä
7.5 Järjestelmää voi halutessaan käyttää myös pelkästään näppäimistön avulla.
Ei toimi täysin
Katastrofaalinen Käyttö teoriassa mahdollista kaikki ohjaukset eivät vielä kunnossa.
Tärkeää saavutettavuuden kannalta
7.6 Käyttäjällä on mahdollisuus muokata järjestelmää paremmin itselleen sopivaksi.
Ei toimi Vähäinen Tällä hetkellä ei voi muokata ->
tuleeko alleviivaukset, muistiinpanot yms.?
7.7 Järjestelmän käyttö onnistuu myös esimerkiksi näkö- tai kuulorajoitteiselta henkilöltä.
Ei toimi Katastrofaalinen Asiasta keskusteltu ja otettu huomioon suunnittelussa, ei vielä toteutunut. Tärkeää
saavutettavuuden kannalta.
(ääneenluku, tekstitetyt videomateriaalit jne.) 7.8 Järjestelmä on käytettävissä erilaisilla
päätelaitteilla (desktop, mobiili yms.).
Ei toimi Katastrofaalinen Ei vielä mobiilioptimoitu, tulossa -> nyt testaus vain pöytäkoneella
Taulukko 10. Esteettinen ja minimalistinen suunnittelu -heuristiikan arviointi Forest-BioFacts-oppimisympäristön pilottiversiossa
Virhetilanteiden tunnistaminen, ilmoittaminen ja korjaaminen
Virhetilanteiden kohdalla ForestBioFacts-oppimisympäristössä havaittiin heuristisen arvioinnin yhteydessä useita mahdollisia ongelmakohtia (taulukko 11). Kuten aiem-min todettiin, oppimisympäristöstä ei voi muuttaa tai poistaa mitään palauttamatto-masti, joten virhetilanteet liittyivät lähinnä oppimisympäristön virheelliseen toimin-taan (esim. navigaatio-ongelmiin). Käytettävyystestauksen kannalta merkityksellisim-mäksi ongelmaksi havaittiin se, että mahdollisista virheistä ei saa virheilmoitusta. Sel-laisilla sivuilla, joilla ei vielä sisältöä ole, mutta joihin käyttäjä voi päätyä, tulisi olla ilmoitus siitä, että sivu on vielä keskeneräinen ja sen tulisi sisältää myös selkeä opas-tus edelliseen artikkeliin tai oppimisympäristön eopas-tusivulle.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
8 Esteettinen ja minimalistinen suunnittelu
8.1 Näkyvillä on vain se tieto, mitä käyttäjä tarvitsee.
Ok - Käyttäjä voi sulkea valikot ja
keskittyä vain sisältöön. Valikot lähtökohtaisesti kiinni.
8.2 Huomio kiinnittyy ensin keskeisiin elementteihin.
Ok - Keskeisiä elementtejä sisältö,
sivurakenne, haku yms.
8.3 Mikään elementti ei hallitse koko näyttöä muiden elementtien kustannuksella.
Ok - Tasapainoinen ulkoasu
8.4 Tyhjää tilaa on hyödynnetty selkeyttämään näyttöä.
Ok - Rauhallinen, kirjamainen ulkoasu
8.5 Teksti on sopivan mittaista, tyylistä ja kokoista ruudulta luettavaksi.
Ei toimi Merkittävä Leipätekstin fonttikoko melko pieni. Korjauksesta keskusteltu.
8.6 Eri kirjaisintyyppejä ja -kokoja on käytetty kohtuudella.
Ok - Otsikkofontteja ja kokoja 3 ja
leipätekstifontti 8.7 Eri värisävyjä ja -koodauksia on käytetty
kohtuudella.
Ok - Joka teemalla oma värinsä
8.8 Järjestelmään lisätyt kuvat sopivat yhteen järjestelmän yleisilmeen kanssa.
Ok - Kuvat lähinnä sisältöön liittyviä.
Teeman kuvituskuva pysyy samana ja valittu teeman mukaan.
8.9 Järjestelmässä erilaiset
sisältökomponentit ovat keskenään tasapainossa (teksti, kuvat, taulukot, videot yms.)
Ei toimi Merkittävä Sisällöntuotanto vielä kesken.
Käytettävyystestausta varten riittävästi erilaista materiaalia 8.10 Alustaa voi käyttää myös ilman värejä. Ei toimi
toistaiseksi
Vähäinen /merkittävä
Tästä ei ole keskusteltu -> miten värisokeus vaikuttaa?
Taulukko 11. Virhetilanteiden tunnistaminen, ilmoittaminen ja korjaaminen -heuristii-kan arviointi ForestBioFacts-oppimisympäristön pilottiversiossa
Opastus ja ohjeet
Heuristisen arvioinnin suorittajien mielestä ForestBioFacts-oppimisympäristö oli helppokäyttöinen ja opittava (taulukko 12). Varsinaisia toiminnallisuuksia oppimis-ympäristössä oli rajallisesti ja ne noudattelivat yleisesti tunnettuja nettisivujen toi-minnallisuuksia (esim. valikot, linkit, painikkeet). Ikonien kohdalla huolta aiheutti se, tunnistavatko käyttäjät ikonit painikkeiksi ja/tai ymmärtävätkö he niiden tarkoituk-sen. Sanaselityksiä sisältävien termien kohdalla arvioijille heräsi myös kysymys siitä, havaitsevatko käyttäjät leipätekstiin lihavoidun sanan sellaiseksi linkiksi, joka avaa sa-naselityslaatikon. Tarvetta varsinaisille käyttöohjeille ei ForestBioFacts-oppimisym-päristölle heuristisen arvioinnin perusteella koettu välttämättömäksi.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
9 Virhetilanteiden tunnistaminen, ilmoittaminen ja korjaaminen
9.1 Virheestä saa aina virheilmoituksen. Ei toimi Merkittävä Lisättävä ainakin "Oops something went wrong" ja /tai maininta että
"under construction"
9.2 Virheilmoitukset ovat ymmärrettäviä ja selittäviä (ei koodeja).
Ei toimi toistaiseksi
Vähäinen Ei mahdollisuutta suuriin virheisiin 9.3 Virheilmoitukset ovat ystävällisiä eivätkä
syyllistä käyttäjää. 9.4 Virheilmoitukset ilmaisevat tarkasti, mikä
ongelman aiheutti ja miten se on korjattavissa.
9.5 Järjestelmä tarjoaa virheelle korjaavaa toimenpidettä (esim. kirjoitusvirhe
"vaneeri" -> "tarkoititko vaneri")
Ei toimi toistaiseksi
Vähäinen Hakukenttään tämä pitäisi saada ehdottomasti
9.6 Järjestelmässä on "undo" -toiminto. Ok - Nuolinäppäimellä pääsee pakittamaan
9.7 Virheiden korjaaminen on helppoa. Ok - Virhemahdollisuus vähäinen,
liittyy navigaatioon lähinnä 9.8 Kirjoitusvirheiden korjaaminen on
yksinkertaista.
Ok - Vain hakukenttään kirjoitetaan,
helppo korjata
Taulukko 12. Opastus ja ohjeet -heuristiikan arviointi ForestBioFacts-oppimisympä-ristön pilottiversiossa
Navigaatio, organisaatio ja rakenne
Navigaatio ja sivurakenne osoittautuivat heuristisessa arvioinnissa ongelmallisim-maksi toiminnallisuudeksi (taulukko 13). Navigaatio oppimisympäristön eri osien vä-lillä ei toiminut virheettömästi. Ongelmia oli sekä sivujen linkityksessä että painikkei-den virheellisessä toiminnassa. Arvioinnissa saatettiin päätyä artikkeliin, josta ei enää päässyt peruuttamalla takaisin lähtöartikkeliin, vaan jouduttiin palaamaan takaisin koko oppimisympäristön etusivulle. Jotkut oppimisympäristön artikkelit olivat pitkiä, jolloin niitä lukiessa joutui näyttöä vierittämään runsaasti.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
10 Opastus ja ohjeet
10.1 Järjestelmä on käytettävissä ilman opastusta.
Ok - Opittava ja helppokäyttöinen
10.2 Järjestelmä tarjoaa opastusta ja ohjeita automaattisesti (esim. Ikonien selitykset yms.).
Ei toimi Merkittävä Ikonien selitykset tulossa
10.3 Ohjeet ovat aina saatavilla. Ei toimi toistaiseksi
Ei koeta ongelmaksi
Tulossa 10.4 Ohjeet ja opastus ovat tilanne- tai
sivukohtaista. 10.5 Ohjeet ja opasteet ovat ymmärrettäviä ja
selkeitä. 10.6 Järjestelmä tarjoaa sanaston ja
sanaselitykset vaikeille termeille.
Ok - Sanaselitykset + tulossa sanakirja
Taulukko 13. Navigaatio, organisaatio ja rakenne -heuristiikan arviointi ForestBio-Facts-oppimisympäristön pilottiversiossa
Interaktiivisuus ja resurssit
Heuristisessa arvioinnissa tunnistettiin se, että ForestBioFacts-oppimisympäristön pi-lottiversiossa oli suhteellisen vähän interaktiivisuutta tukevia elementtejä (taulukko 14). Ensimmäistä käytettävyystestausta ajatellen oppimista tukevat tehtävät, sekä tekstin joukossa että videoon upotettuna, koettiin kuitenkin riittäviksi.
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
11 Navigaatio, organisaatio ja rakenne
11.2 Navigointi on selkeää ja vaivatonta. Ei toimi Katastrofaalinen Navigaatio ei toimi suunnitellusti 11.3 Navigointireittiä ei tarvitse muistaa
päätäkseen tietylle sivulle.
Ei toimi Katastrofaalinen Sivujen linkitykset väärin, jolloin navigointi ei toimi
11.4 Navigointi etenee ilman turhia välivaiheita.
Ei toimi Katastrofaalinen Käytettävyystestauksen avulla tarkka tilanne
11.5 Linkit johtavat aina oikealle sivulle. Ei toimi Katastrofaalinen Linkkausongelmia 11.6 Linkkien väri muuttuu, kun linkki on
avattu. (lähinnä järjestelmän ulkopuoliset linkit)
Ei toimi Merkittävä Käyttäjä ei vielä näe, mitkä linkit hän on avannut
11.7 Toisiinsa liittyvä tieto on esitetty lähekkäin.
Toimii osittain
- Tietoa erittäin paljon,
teemakohtaisesti kyllä lähekkäin 11.8 Skrollaamisen tarve on minimoitu. Ei toimi Vähäinen Artikkeleiden pituus pidettävä
kohtuullisena 11.9 Järjestelmässä on kartta tai taulukko,
mistä käyttäjä näkee kokonaisuuden yhdellä silmäyksellä.
Ei toimi Merkittävä Tulossa on teemojen etusivut, kokoomataulukot, prosssijana yms.
Taulukko 14. Interaktiivisuus ja resurssit -heuristiikan arviointi ForestBioFacts-oppi-misympäristön pilottiversiossa
Oppimisen tukeminen
Oppimisen tukeminen -heuristiikka toteutui ForestBioFacts oppimisympäristössä melko hyvin (taulukko 15). Jokaisella artikkelilla oli artikkelin kirjoittajan laatimat osaamistavoitteet. Osaamistavoitteisiin liittyviä tehtäviä artikkeleissa ei ollut, mutta artikkelit lukemalla kykeni löytämään vastaukset osaamistavoitteisiin. Heuristisen ar-vioinnin yhteydessä nousi esiin kysymys siitä, löytäisivätkö käyttäjät osaamistavoit-teet ikonipainikkeen takaa. Heuristisessa arvioinnissa ei osattu ottaa kantaa oppimis-ympäristön kykyyn tukea erilaisia oppimisstrategioita
Heuristiikka Toiminta Virheen
vakavuusaste Kommentit
12 Interaktiivisuus ja resurssit 12.1 Järjestelmä tarjoaa mielekästä
interaktiivisuutta käyttäjälle eikä tyydy vain esittämään pitkiä tekstikappaleita.
Ok - Tehtävät, videoihin upotetut
tehtävät 12.2 Järjestelmä tarjoaa monipuolista ja
laadukasta interaktiivista sisältöä, joka motivoi käyttäjää.
Ei toimi Merkittävä Interaktiivinen sisältö rajoittuu tällä hetkellä vain tehtäviin 12.3 Järjestelmä tarjoaa käyttäjälle pääsyn
oppimista tukeviin resursseihin ja sisältöihin (mahdollisesti myös järjestelmän ulkopuolelle).
Ok - Linkkejä muille asiaa käsitteleville
sivustoille
12.4 Järjestelmän ulkopuoliset linkit toimivat . Ok - Toimivat, jos linkki luotu oikein 12.5 Järjestelmä tarjoaa sisältöihin sopivaa
lisämateriaalia soveltuvissa kohdissa.
Ok - Kuvat, tehtävät, videot, linkit
Taulukko 15. Interaktiivisuus ja resurssit -heuristiikan arviointi ForestBioFacts-oppi-misympäristön pilottiversiossa
4.2.1 Heuristinen arviointi ja merkittävimmät käytettävyysongelmat
Heuristisen arvioinnin avulla tunnistettiin useita käytettävyysongelmia, jotka olisi rat-kaistava käytettävyyden ja käyttäjäkokemuksen parantamiseksi. Tässä diplomityössä keskitytään vain ensimmäisen käytettävyystestauksen kannalta merkittävimpiin käy-tettävyysongelmiin. Heuristinen arviointi nosti esiin näistä seuraavat:
Navigointi haastavaa -> kokonaisuuden hahmottaminen vaikeutuu
Ohjaukset sivurakenteessa osin virheellisiä
Osa sivuista päättyy umpikujaan
Kaikki painikkeet eivät toimi
Hakutulokset puutteellisia tai niiden järjestys ei ole relevantti
Toiminnallisuuksien löytämisen haasteet (esim. sisällysluettelo, valikot,
Toiminnallisuuksien löytämisen haasteet (esim. sisällysluettelo, valikot,