Kun haluat vertailla useita käyttöliittymiä yhdessä tutkimuksessa, on olemassa kaksi tapaa määrittää oman testin osallistujat, nämä useita ehtoja:
- Välillä-aiheista (tai välillä-ryhmät) tutkimuksen suunnittelu: eri ihmiset testata jokainen kunnossa, niin että jokainen henkilö altistuu vain yksi käyttöliittymä.
- Sisällä-aiheista (tai toistuvassa-toimenpiteet) tutkimuksen suunnittelu: sama henkilö testien kaikki edellytykset (eli kaikki käyttöliittymät).,
(huomaa, että tässä käytetään sanaa ”design” viittaamaan kokeen suunnitteluun, eikä verkkosivujen suunnitteluun.)
esimerkiksi, jos halusimme vertailla kahden auton vuokraus sivustoja, A-ja B-katsomalla, miten osallistujat kirja autoja jokaisen sivuston, meidän tutkimus voisi olla suunniteltu kahdella eri tavalla, sekä täysin oikeutettua:
- Välillä-aiheet: Jokainen osallistuja voisi testata yhden auton-vuokraus-sivustolla ja varata auton vain, että sivuston.
- oppiaineiden sisällä: jokainen osallistuja pystyi testaamaan molemmat autovuokraamot ja varaamaan jokaiselle auton.,
Tahansa käyttäjä tutkimusta, joka liittyy enemmän kuin yksi testi kunto on selvittää, onko välillä-aiheita tai sisällä-aiheista. Ero on kuitenkin erityisen tärkeä määrällisten tutkimusten kannalta.
Kokeellinen Suunnittelu Määrälliset Tutkimukset
toisin Kuin kvalitatiiviset tutkimukset, määrällisiä käytettävyyden opintojen tavoitteena on seurauksena, että havainnot ovat tilastollisesti todennäköisesti yleistää koko käyttäjä väestöstä. Se, miten tällaisten tutkimusten tietoja analysoidaan, riippuu siitä, miten tutkimus on suunniteltu (eli tutkimuksen kokeellisesta suunnittelusta).,
Usein tärkein tavoite määrällisiä käytettävyyden tutkimuksissa on vertailla — sivusto, jossa sen kilpailijat, kaksi eri iteraatioiden suunnittelu, tai kaksi eri käyttäjäryhmille (kuten asiantuntijat vs. aloittelijat)., Kuten missä tahansa tieteellisessä kokeessa, jossa haluamme havaita syy-seuraussuhteita, kvantitatiivinen tutkimus, joka liittyy kahdenlaisia muuttujia:
- Riippumattomia muuttujia, jotka ovat suoraan manipuloida tutkija
- Riippuvaisia muuttujia, jotka on mitattu (ja odotetaan vaihdella seurauksena riippumattoman muuttujan manipulointi)
(Jos tutkimus tuottaa tilastollisesti merkittäviä tuloksia, sitten voimme sanoa, että muutos riippumaton muuttuja aiheutti muutoksen riippuva muuttuja.)
palataan alkuperäiseen autonvuokrausesimerkkiimme., Jos halusimme mitata, mitkä kaksi sivustoja, A tai B, on parempi tehtävä varaamalla auton, voimme valita Sivuston (jossa on vain kaksi mahdollista arvoa tai tasoa — A ja B) riippumattoman muuttujan, ja aikaa tehtävän ja tarkkuus varaus auto voi olla riippuvaisia muuttujia. Tutkimuksen tavoitteena olisi nähdä, muuttuvatko riippuvaiset muuttujat (aika ja tarkkuus), kun vaihdamme sivustoa tai ne pysyvät samoina. (Jos ne pysyvät samana, niin mikään sivustoista ei ole parempi kuin toinen.,)
suunnitella tutkimus, seuraava kysymys, joka meidän täytyy vastata, onko tutkimuksen suunnittelu pitäisi olla välillä-aiheita tai sisällä-aiheita — se on, onko osallistuja tutkimus olisi paljastanut kaikki eri edellytykset riippumattoman muuttujan tutkimuksessamme (sisällä-aiheet) tai vain yksi ehto (välillä-aiheet). Kokeellisen suunnittelun valinta vaikuttaa siihen, minkä tyyppistä tilastollista analyysia sinun tiedoissasi pitäisi käyttää.,
on mahdollista, että kokeen suunnittelu on sekä eu-aiheista ja välillä-aiheista. Oletetaan esimerkiksi, että autovuokraamotutkimuksessamme olimme kiinnostuneita myös siitä, miten alle 30-vuotiaat osallistujat suoriutuvat verrattuna vanhempiin osallistujiin. Tässä tapauksessa meillä olisi kaksi riippumatonta muuttujaa:
- Ikä, jossa 2 tasoa: alle 30-vuotiaat, yli 30 –
- Sivuston, jossa on 2 tasoa: A-ja B –
tutkimuksen, meidän on rekrytoida yhtä monta osallistujaa kussakin ikäryhmässä., Oletetaan, että päätämme, että jokainen osallistuja, onko alle tai yli 30, on tehdä auto-vuokra varaus sekä sivuston ja sivusto B. tässä tapauksessa tutkimus on majoitusliike,-aiheista osalta riippumaton muuttuja Sivuston (koska jokainen ihminen näkee sekä muuttujaa että on sekä sivuston ja sivuston B). Kuitenkin, tutkimus on välillä-aiheita suhteessa Ikä: yksi henkilö voi olla vain yhdessä ikäryhmässä (joko alle tai yli 30, ei molempia)., (No, teknisesti, voit valita ryhmä, alle 30-vuotiaiden ja odottaa, kunnes he täyttävät 30 saada ne testi sivustoja uudestaan, mutta tämä asennus on erittäin epäkäytännöllistä useimmille todellisissa tilanteissa.)
jotkut riippumattomat muuttujat voivat määrätä suunnittelun valinnan. Ikä on yksi niistä, kuten edellä on nähty. Toiset ovat Asiantuntemus (jos haluamme vertailla asiantuntijat ja aloittelijat), Käyttäjän Tyyppi (jos halutaan vertailla eri käyttäjäryhmille tai personas — esimerkiksi liike-matkailija vs. vapaa-ajan matkustaja) tai Sukupuolten (olettaen, että henkilö ei voi olla eri sukupuolia samalla)., Ulkopuolella käytettävyys, lääke, tutkimukset ovat yksi yhteinen asia välillä-aihe suunnittelu: osallistujat ovat alttiina vain yksi hoito: joko lääke testataan tai lumelääkettä, ei molempia. Ja joskus manipulointi itse muutoksia valtion osallistuja: esimerkiksi, jos haluat nähdä, mitkä kaksi opetussuunnitelmia on tehokkaampaa opettaa lukeminen, sinua voisi ei ole sama opiskelija altistua molemmat, koska kun hän on oppinut lukemaan, hän ei voi unohtaa sitä.
kumpi on parempi: tutkittavien välillä vai tutkittavien sisällä?
valitettavasti tähän kysymykseen ei ole helppoa vastausta., Kuten edellä on nähty, joskus riippumattomat muuttujat sanelevat kokeellisen suunnittelun. Mutta monissa tilanteissa molemmat mallit voivat olla mahdollisia.
- Välillä-aiheista minimoi oppimisen ja siirtää eri olosuhteissa. Kun henkilö on suorittanut sarjan tehtäviä autonvuokraussivustolla, hän tuntee verkkotunnuksen paremmin kuin aiemmin. Esimerkiksi, hän voi nyt tietää, että auto-vuokra-sivustot veloittaa ylimääräinen maksu kuljettajat alle 21 -, tai mitä törmäys-vahinkoa luopuminen on., Tuo tieto todennäköisesti auttaa häntä tullut tehokkaampaa toinen auto-vuokra-sivusto, vaikka se toinen sivusto voi olla hyvin erilainen kuin ensimmäinen.
välillä-aiheen muotoilu, tämä tietämyksen siirtäminen ei ole ongelma — osallistujat eivät koskaan altistu useita tasoja samaan riippumaton muuttuja.
- koehenkilöiden välillä tehdyissä tutkimuksissa on lyhyempiä istuntoja kuin tutkittavien sisällä. Osallistuja, joka testaa yhden autonvuokraus sivusto on lyhyempi istunto kuin yksi, joka testaa kaksi., Lyhyemmät istunnot ovat vähemmän rasittava (tai tylsä) käyttäjille, ja voi myös olla asianmukaisempaa kauko unmoderated testaus (varsinkin kun työkaluja kuten UserZoom vaativat yleensä melko lyhyen session pituus).
- koehenkilöiden väliset kokeet on helpompi perustaa, varsinkin kun on useita itsenäisiä muuttujia. Kun tutkimus on tutkittavien sisällä, sinun täytyy käyttää ärsykkeiden satunnaistamista varmistaaksesi, ettei tilausvaikutuksia ole. Esimerkiksi autovuokraamotutkimuksessamme meidän on varmistettava, että osallistujat eivät aina aloita sivustosta A ja siirry sitten sivustoon B., Sivustojen järjestyksen on oltava satunnainen jokaiselle osallistujalle. Tämä on helppoa vain kahdella sivustolla: satunnaisesti määrittää 50% käyttäjistä aloittaa kunkin sivuston. Mutta voit lisätä monia riippumattomia muuttujia ja tasoja riippumaton muuttuja, satunnaistaminen vaikeampi toteuttaa sisällä joitakin olemassa olevia alustoja määrällinen käytettävyystestaus.
- Sisällä-aihe mallit vaativat vähemmän osallistujia ja ovat halvempia ajaa., Havaita tilastollisesti merkittävää eroa kahden ehtoja, sinun tulee usein tarvitse reilu määrä tietojen pistettä (usein yli 30) kussakin tilassa. Jos sinulla on within-subject design, jokainen osallistuja tarjoaa data piste kunkin tason riippumaton muuttuja. Autovuokraamoamme varten 30 osallistujaa tarjoaa datapisteitä molemmille sivustoille. Mutta jos tutkimus on välillä-koehenkilöt tarvitset kaksi kertaa enemmän saada saman määrän datapisteitä. Se tarkoittaa kaksinkertaista hintaa.
- koehenkilöiden sisäinen suunnittelu minimoi satunnaisen melun., Ehkä tärkein etu, sisällä-aihe malleja on, että ne tehdä siitä vähemmän todennäköistä, että todellinen ero välillä sinun edellytykset jäädä havaitsematta tai kuulu kohinaa.
Yksittäiset osallistujat tuovat testi oman historiansa, taustatiedot ja konteksti. Yksi voi olla väsynyt pitkän bilettämisyön jälkeen, toinen voi kyllästyä, toinen taas on saattanut saada suuren uutisen juuri ennen tutkistelua ja olla onnellinen. Jos sama osallistuja on vuorovaikutuksessa muuttujan kaikkien tasojen kanssa, hän vaikuttaa niihin samalla tavalla., Onnellinen ihminen on onnellinen molemmilla sivustoilla, väsynyt molemmissa. Mutta jos tutkimus on tutkittavien välinen, onnellinen osallistuja on vuorovaikutuksessa vain yhden sivuston kanssa ja voi vaikuttaa lopullisiin tuloksiin. Sinun täytyy varmistaa, että saat samanlainen onnellinen osallistuja toisessa ryhmässä vastapainoksi hänen vaikutuksia.
käytännössä, tutkijat eivät voi arvioida tällaiset erot osallistujien välillä — vaikka ne voivat ottelu sukupuoli, kokemus ja ikä eri ryhmien, se on vaikea ennustaa tai tunnistaa muita tekijöitä, kunkin osallistujan.,
Satunnaistaminen: Välttämätön Sekä erilaisia Suunnittelu
Onko teidän kokeellinen suunnittelu on majoitusliike,-aiheista tai välillä-aiheita, sinun täytyy olla huolissaan satunnaistaminen, vaikka hieman eri tavoin.
Edellä, keskustelimme, miksi satunnaistaminen on tärkeää, sisällä-aihe mallit: se ehkäisee mahdollista, jotta vaikutukset ja minimoi siirto ja oppiminen eri olosuhteissa.,
välillä-aihe malleja, sinun täytyy varmistaa, että osallistujat ovat varattu satunnaisesti ehtoja, koska haluat varmistaa, että osallistuja tehtävä ei vaikuta tutkimuksen tuloksiin., Näin ollen, jos tutkija päättää, että kaikki osallistujat että hän tykkää tulisi olla vuorovaikutuksessa sivuston ja sitten hän toteaa, että sivusto On tehty paremmin kuin sivuston B, hän ei tiedä, onko hän löysi todellinen ero sivustoja tai onko tulos yksinkertaisesti heijastaa hänen tehtävä (esimerkiksi, koska ihmiset, jotka tuntuu, että he ovat halunneet taipumus palata hyväksi, ja voi olla enemmän potilaan tai on myönteinen ajattelutapa testin aikana).
jopa ilman niin selvää vinoumaa kuin henkilökohtaiset mieltymyksesi, on helppo saada satunnaistaminen väärin., Sanotaan, että tutkistelet neljää päivää, lauantaista tiistaihin. Saatat päättää on ensimmäinen puolet koe-käyttäjille aloittaa kanssa sivuston ja toinen puoli käyttäjistä aloittaa sivuston B. Kuitenkin, tämä ei ole totta, satunnaistaminen, koska se on erittäin todennäköistä, että tietyntyyppiset ihmiset ovat todennäköisemmin samaa mieltä tutkimuksen viikonlopun aikana ja muita ihmisiä, ovat todennäköisesti rekisteröidy arkipäivä testaus lähtö.,
Johtopäätös
Käyttäjän tutkimus voi olla välillä-aiheita tai sisällä-aiheista (tai molemmat), riippuen siitä, onko jokainen osallistuja on alttiina vain yksi ehto tai kaikki edellytykset, jotka ovat erilaisia sisällä tutkimus. Kukin näistä tyyppisiä kokeellinen muotoilu on omat etunsa ja haittansa; sisällä-aiheista suunnittelu vaatii vähemmän osallistujia ja lisää mahdollisuuksia löytää todellinen ero keskuudessa ehtoja; välillä-aiheista malleja minimoida oppimisen vaikutuksia koko ehtoja, johtaa lyhyempi istuntoja, ja voi olla helpompi perustaa ja analysoida.