Kehitä psykologinen mittari laboratorion kanssa
Selkeästä konstruktin määrittelystä pisteytettyyn ja dokumentoituun testiin. Laboratorio voi ohjata koko hanketta tai vain niitä vaiheita, joita ette pysty hoitamaan itse.
Testin kehittäminen on tilauksesta tehtävä hanke. Laajuudesta, aikataulusta ja hinnasta sovitaan alkukartoituksen jälkeen.
Miten kehityshanke etenee
Jokainen vaihe päättyy päätökseen: jatketaan, muokataan tai lopetetaan. Näin heikot osiot ja epämääräiset asteikot eivät päädy valmiiseen testiin.
Konstruktin määrittely
Mitä testin pitää tarkalleen mitata, kenelle ja mitä päätöstä varten? Kirjoitamme konstruktin määritelmän, jossa ovat osa-alueet, siihen liittyvät ja liittymättömät konstruktit sekä käyttötarkoitus.
Osioiden laadinta ja tarkistus
Osiot kirjoitetaan määritelmän pohjalta, sisältöasiantuntijat arvioivat niiden olennaisuuden, selkeyden ja kulttuurisen sopivuuden, ja niistä tarkistetaan sanamuodot, jotka vain osa ryhmistä ymmärtäisi.
Pilotointi ja analyysi
Kohderyhmässä tehtävä pilotti näyttää, miten osiot toimivat: vaikeus, erottelukyky, osio–kokonaispistekorrelaatiot, vastausmallit ja ensimmäinen katsaus faktorirakenteeseen.
Pisteytys ja dokumentointi
Lukitsemme asteikot, pisteytyssäännöt ja käänteisesti pisteytettävät osiot ja dokumentoimme jokaisen valinnan, jotta testi voi edetä validointiin ja normittamiseen.
Varhain ratkaistavat valinnat
Nämä päätökset muovaavat kaikkea, mikä seuraa. Niiden muuttaminen pilotin jälkeen tarkoittaa yleensä uutta pilottia.
Käyttötarkoitus
Henkilövalinta, kehittäminen tai tutkimus. Yksilöitä koskeviin päätöksiin tarkoitettu testi tarvitsee vahvempaa näyttöä kuin ryhmätason tietoa tuottava testi.
Kohderyhmä
Kuka testin tekee: koulutustaso, uravaihe, toimiala. Osioiden ja normien on sovittava tähän perusjoukkoon.
Kielet
Mitä kieliversioita tarvitsette nyt ja myöhemmin. Jokainen versio mukautetaan ja analysoidaan omana kokonaisuutenaan, ei vain käännetä.
Osiomuoto
Monivalinta, Likert-asteikot, pakotettu valinta tai tilannetehtävät, joilla kullakin on omat vahvuutensa ja vastausvinoumansa.
Pituus ja aika
Riittävästi osioita asteikkoa kohden luotettavia pisteitä varten, mutta ei enempää kuin vastaajat jaksavat vastata keskittyneesti.
Testin käyttötilanne
Valvottu tai valvomaton, aikarajat, laite. Valvomaton verkkokäyttö vaatii erityistä huomiota osioiden paljastumiseen ja vastausten laatuun.
Rakennettu toimimaan Match.hr:ssä
Laboratorion kanssa kehitetty testi voidaan tarjota Match.hr:ssä, yksityisesti organisaatiollesi tai kirjastossa, ja alusta hoitaa pisteytyksen ja raportit. Alkukartoituksessa sovimme, mitkä alla olevista kohdista koskevat testiäsi ja mistä alkaen.
- Asteikot, ala-asteikot ja käänteisesti pisteytettävät osiot pisteytyssääntöjen mukaisesti
- Normipisteet, kuten persentiilit, staniinit ja T-pisteet, kun normiryhmä on olemassa
- Erillinen analyysi jokaiselle kieliversiolle
- Osiotunnusluvut lasketaan uudelleen arviointimäärien kasvaessa
- Psykometrinen seloste, joka näyttää arviointitason ja tähänastisen näytön
Arviointikriteerimme noudattavat COTANin ja EFPAn testiarviointimallien rakennetta. Arvioinnin tekee Match.hr itse.
Uusi testi aloittaa ilman näyttöä
Pilotti näyttää, toimivatko osiot tarkoitetulla tavalla. Se ei osoita, että testi ennustaa mitään. Näyttö tiettyyn käyttöön, kuten henkilövalintaan, edellyttää validointitutkimusta, jossa on riittävästi osallistujia ja olennainen kriteeri. Siihen asti esitä testi kehitysvaiheessa olevana äläkä käytä sitä yksinään ihmisiä koskeviin päätöksiin.
Usein kysytyt kysymykset
Kuinka monta ihmistä pilottiin tarvitaan?
Se riippuu analyyseista. Osiotunnusluvut vakiintuvat kohtuullisesti muutamalla sadalla vastaajalla kieliversiota kohden; faktorianalyysi vaatii yleensä enemmän, erityisesti kun asteikkoja on paljon. Alkukartoituksessa määritämme otoskoon, joka sopii kysymyksiinne ja siihen, miten tavoitatte kohderyhmän.
Voitteko kehittää testin usealla kielellä yhtä aikaa?
Kyllä, mutta käsittelemme jokaista kieltä omana versionaan. Osiot mukauttavat äidinkieliset puhujat, joilla on alan tuntemusta, ja ne tarkistetaan merkityksen eikä vain sanamuodon osalta. Se, mittaavatko versiot samaa asiaa, on aineiston ratkaistava kysymys, joten jokainen versio pilotoidaan ja analysoidaan erikseen.
Kuka omistaa mittarin?
Oikeuksista ja lisensseistä sovitaan kirjallisesti ennen työn aloittamista. Jos haluat myöhemmin tarjota testiä muille organisaatioille, Julkaise testisi -sivulla kerrotaan, miten mittarit tuodaan Match.hr:ään.
Mitä dokumentaatio sisältää?
Konstruktin määritelmän, tiedot osioiden laadinnasta ja tarkistuksesta, pilottiotoksen ja tulokset, pisteytyssäännöt sekä käyttötarkoituksen ja sen rajat. Se on teknisen käsikirjan pohja, kun validointi ja normittaminen on tehty.
Aiheeseen liittyvät sivut
Testaa ensimmäinen hakijasi jo tänään
Maksuton tili, ei luottokorttia, tulokset minuuteissa.