Kehitä psykologinen mittari laboratorion kanssa

Selkeästä konstruktin määrittelystä pisteytettyyn ja dokumentoituun testiin. Laboratorio voi ohjata koko hanketta tai vain niitä vaiheita, joita ette pysty hoitamaan itse.

Testin kehittäminen on tilauksesta tehtävä hanke. Laajuudesta, aikataulusta ja hinnasta sovitaan alkukartoituksen jälkeen.

Miten kehityshanke etenee

Jokainen vaihe päättyy päätökseen: jatketaan, muokataan tai lopetetaan. Näin heikot osiot ja epämääräiset asteikot eivät päädy valmiiseen testiin.

  1. Konstruktin määrittely

    Mitä testin pitää tarkalleen mitata, kenelle ja mitä päätöstä varten? Kirjoitamme konstruktin määritelmän, jossa ovat osa-alueet, siihen liittyvät ja liittymättömät konstruktit sekä käyttötarkoitus.

  2. Osioiden laadinta ja tarkistus

    Osiot kirjoitetaan määritelmän pohjalta, sisältöasiantuntijat arvioivat niiden olennaisuuden, selkeyden ja kulttuurisen sopivuuden, ja niistä tarkistetaan sanamuodot, jotka vain osa ryhmistä ymmärtäisi.

  3. Pilotointi ja analyysi

    Kohderyhmässä tehtävä pilotti näyttää, miten osiot toimivat: vaikeus, erottelukyky, osio–kokonaispistekorrelaatiot, vastausmallit ja ensimmäinen katsaus faktorirakenteeseen.

  4. Pisteytys ja dokumentointi

    Lukitsemme asteikot, pisteytyssäännöt ja käänteisesti pisteytettävät osiot ja dokumentoimme jokaisen valinnan, jotta testi voi edetä validointiin ja normittamiseen.

Varhain ratkaistavat valinnat

Nämä päätökset muovaavat kaikkea, mikä seuraa. Niiden muuttaminen pilotin jälkeen tarkoittaa yleensä uutta pilottia.

Käyttötarkoitus

Henkilövalinta, kehittäminen tai tutkimus. Yksilöitä koskeviin päätöksiin tarkoitettu testi tarvitsee vahvempaa näyttöä kuin ryhmätason tietoa tuottava testi.

Kohderyhmä

Kuka testin tekee: koulutustaso, uravaihe, toimiala. Osioiden ja normien on sovittava tähän perusjoukkoon.

Kielet

Mitä kieliversioita tarvitsette nyt ja myöhemmin. Jokainen versio mukautetaan ja analysoidaan omana kokonaisuutenaan, ei vain käännetä.

Osiomuoto

Monivalinta, Likert-asteikot, pakotettu valinta tai tilannetehtävät, joilla kullakin on omat vahvuutensa ja vastausvinoumansa.

Pituus ja aika

Riittävästi osioita asteikkoa kohden luotettavia pisteitä varten, mutta ei enempää kuin vastaajat jaksavat vastata keskittyneesti.

Testin käyttötilanne

Valvottu tai valvomaton, aikarajat, laite. Valvomaton verkkokäyttö vaatii erityistä huomiota osioiden paljastumiseen ja vastausten laatuun.

Rakennettu toimimaan Match.hr:ssä

Laboratorion kanssa kehitetty testi voidaan tarjota Match.hr:ssä, yksityisesti organisaatiollesi tai kirjastossa, ja alusta hoitaa pisteytyksen ja raportit. Alkukartoituksessa sovimme, mitkä alla olevista kohdista koskevat testiäsi ja mistä alkaen.

  • Asteikot, ala-asteikot ja käänteisesti pisteytettävät osiot pisteytyssääntöjen mukaisesti
  • Normipisteet, kuten persentiilit, staniinit ja T-pisteet, kun normiryhmä on olemassa
  • Erillinen analyysi jokaiselle kieliversiolle
  • Osiotunnusluvut lasketaan uudelleen arviointimäärien kasvaessa
  • Psykometrinen seloste, joka näyttää arviointitason ja tähänastisen näytön

Arviointikriteerimme noudattavat COTANin ja EFPAn testiarviointimallien rakennetta. Arvioinnin tekee Match.hr itse.

Uusi testi aloittaa ilman näyttöä

Pilotti näyttää, toimivatko osiot tarkoitetulla tavalla. Se ei osoita, että testi ennustaa mitään. Näyttö tiettyyn käyttöön, kuten henkilövalintaan, edellyttää validointitutkimusta, jossa on riittävästi osallistujia ja olennainen kriteeri. Siihen asti esitä testi kehitysvaiheessa olevana äläkä käytä sitä yksinään ihmisiä koskeviin päätöksiin.

Usein kysytyt kysymykset

Kuinka monta ihmistä pilottiin tarvitaan?

Se riippuu analyyseista. Osiotunnusluvut vakiintuvat kohtuullisesti muutamalla sadalla vastaajalla kieliversiota kohden; faktorianalyysi vaatii yleensä enemmän, erityisesti kun asteikkoja on paljon. Alkukartoituksessa määritämme otoskoon, joka sopii kysymyksiinne ja siihen, miten tavoitatte kohderyhmän.

Voitteko kehittää testin usealla kielellä yhtä aikaa?

Kyllä, mutta käsittelemme jokaista kieltä omana versionaan. Osiot mukauttavat äidinkieliset puhujat, joilla on alan tuntemusta, ja ne tarkistetaan merkityksen eikä vain sanamuodon osalta. Se, mittaavatko versiot samaa asiaa, on aineiston ratkaistava kysymys, joten jokainen versio pilotoidaan ja analysoidaan erikseen.

Kuka omistaa mittarin?

Oikeuksista ja lisensseistä sovitaan kirjallisesti ennen työn aloittamista. Jos haluat myöhemmin tarjota testiä muille organisaatioille, Julkaise testisi -sivulla kerrotaan, miten mittarit tuodaan Match.hr:ään.

Mitä dokumentaatio sisältää?

Konstruktin määritelmän, tiedot osioiden laadinnasta ja tarkistuksesta, pilottiotoksen ja tulokset, pisteytyssäännöt sekä käyttötarkoituksen ja sen rajat. Se on teknisen käsikirjan pohja, kun validointi ja normittaminen on tehty.

Testaa ensimmäinen hakijasi jo tänään

Maksuton tili, ei luottokorttia, tulokset minuuteissa.