TalentApproved

6 Validointitarkistusta, joita HR:n on vaadittava automatisoidulta arviointipalautteelta

6 Validointitarkistusta, joita HR:n on vaadittava automatisoidulta arviointipalautteelta

Automaattinen arviointipalaute on tekoälyn tuottamia pisteitä, yhteenvetoja ja arvioijan muistiinpanoja, joita taitoja arvioiva alusta tuottaa rekrytointipäätösten tueksi. Se nopeuttaa seulontaa ja pitää pisteytyksen yhtenäisenä suurissa hakijajoukossa, mutta ansaitsee luottamuksesi vasta silloin, kun tulokset perustuvat validoituihin kriteereihin, ihminen tarkastaa ne ja sekä rekrytoijille että hakijoille annetaan selkeä perustelu.

Lyhyesti:

  • Automaattinen arviointipalaute on validoitava sen varmistamiseksi, että pisteet mittaavat olennaisia taitoja ja korreloivat todellisen työssä suoriutumisen kanssa.
  • Selkeät, sekä esimiehille että hakijoille räätälöidyt selitykset ovat välttämättömiä: niiden on kerrottava, mitä arvioitiin, kuinka luotettava malli on ja missä sen rajat ovat.
  • Ihmisen suorittama tarkastus on edelleen ratkaisevan tärkeää erityisesti raja-arvojen läheisyydessä, ja muodolliset menettelytavat ja kynnysarvot on oltava paikallaan ennen käyttöönottoa.
  • Toimittajien on toimitettava viimeisimmät vinouman testauksen tulokset, tarkastuslokit ja yksityiskohtaiset validointiraportit työkalun oikeudenmukaisuuden ja tarkkuuden varmistamiseksi.
  • Pilotointi yksityiskohtaisella dokumentaatiolla ja jatkuva seuranta auttavat varmistamaan, että arviointijärjestelmä tukee rekrytointia luotettavasti ilman vinoumaa tai juridisia riskejä.
Talent Approved
Arvioi taitoja suuremmalla varmuudella
Talent Approved auttaa rekrytointitiimejä luomaan räätälöityjä taitotestejä, tarkastelemaan tekoälyn tuottamia yhteenvetoja ja tekemään perusteltuja päätöksiä ansioluetteloiden ulkopuolelta.

Sisällysluettelo

Miksi automaattinen arviointipalaute on tärkeää rekrytointitiimeille

200 hakijan käsitteleminen käsin yhtä tehtävää varten kestää päiviä. Taitoja arvioivaan alustaan rakennettu automaattinen pisteytysjärjestelmä voi pistyttää ja tiivistää saman hakijajoukon tunneissa, minkä vuoksi useimmat suurivolyymiset rekrytointitiimit ovat jo ottaneet jonkinlaisen version siitä käyttöön hyötyäkseen tekoälyarvioinnin tarjoamasta rekrytointilaadun parantamisesta. Hyödyt ulottuvat nopeutta pidemmälle.

Hakijat, jotka odottavat viikkoja vastausta, menettävät kiinnostuksensa tai hyväksyvät toisen tarjouksen. Välittömän palautteen työkalut lyhentävät tätä viivettä ja antavat hakijoille tunteen siitä, että prosessi kunnioittaa heidän aikaansa, minkä SIOP:n hakijareaktiotutkimus yhdistää suoraan siihen, kuinka oikeudenmukaiseksi hakijat arvioivat koko rekrytointikokemuksen.

Riski on saman kolikon kääntöpuolella:

  • Pisteet ilman selitystä eivät kerro rekrytoijalle mitään siitä, heijastavatko ne todellista, työn kannalta merkityksellistä taitoa.
  • Validoimaton testi voi palkita ominaisuuksia, joilla ei ole mitään tekemistä työssä suoriutumisen kanssa.
  • Malli, joka on koulutettu ilman vinouman tarkistuksia, voi hiljaisesti asettaa suojatun ryhmän epäedulliseen asemaan, ja työnantaja pysyy oikeudellisessa vastuussa, vaikka kolmannen osapuolen toimittaja olisi rakentanut työkalun.

Nopeus ilman validointia on vain nopeaa arvausta.

Mitä luotettavan automaattisen arviointipalautteen on sisällettävä

Ennen kuin luotat yhdenkään arviointipalauteohjelmiston pisteytykseen, tarkista se kuuden ammattimaisesta ja sääntelyllisestä ohjauksesta johdetun kriteerin avulla.

  1. Validointiperusteet. Alustan on osoitettava, että sen pisteet mittaavat työn kannalta relevantteja tietoja, taitoja, kykyjä ja muita ominaisuuksia (KSAO) ja korreloivat todellisen työssä suoriutumisen kanssa. Kiiltävä tekoälyn tuottama yhteenveto ei itsessään ole todiste validiteetista.
  2. Räätälöity selitettävyys. Rekrytoijat tarvitsevat toimintasuuntautunutta yksityiskohtaa: mitä mitattiin, kuinka luotettava malli on ja missä sen rajat ovat. Hakijat tarvitsevat yksinkertaisemman version: mitä arvioitiin ja miten huoli voidaan ilmaista – ero, jonka NIST:n viitekehys tekee eksplisiittisesti.
  3. Ihmisen suorittama tarkastus määritellyillä kynnysarvoilla. Pätevä henkilö hyväksyy ennen kuin hylkäys lähetetään, erityisesti raja-arvojen läheisyydessä.
  4. Yksityisyys ja tiedonanto. Hakijoiden on tiedettävä, mitä tietoja kerätään, kuinka kauan niitä säilytetään ja kenellä on niihin pääsy.
  5. Vinouman testaus ja jatkuva seuranta. Pisteet tarkistetaan haitallisten vaikutusten varalta käyttöönoton yhteydessä ja tarkistetaan uudelleen aikataulun mukaisesti, ei vain kerran.
  6. Tarkastusketju ja versioiden seuranta. Jokaisen pistemäärän on oltava jäljitettävissä mallin versioon ja lähdevastauksiin, jotka tuottivat sen.

Ammattilaisen vinkki: Pyydä miltä tahansa toimittajalta heidän viimeisimmät haitallisen vaikutuksen testitulokset ennen sopimuksen allekirjoittamista, ei ensimmäisen rekrytointisyklin jälkeen. Jos he eivät pysty toimittamaan sellaista, se on vastauksesi.

Kuinka arvioida alustan automaattista palautetta ennen ostopäätöstä

Jäsennelty pilotti on aina parempi kuin myyntiesittely. Ennen budjetin sitomista pyydä seuraavat tiedot miltä tahansa arviointipalauteohjelmiston toimittajalta:

  • Työnanalyysin kartoitusdokumentti, joka osoittaa, mitkä kysymykset liittyvät mihinkin KSAO-ominaisuuteen.
  • Validointi- ja vinouman testausraportit, ei markkinointiväitteitä tarkkuudesta.
  • Näytteet hakijoille ja arvioijille suunnatuista yhteenvedoista, joita voit tosiasiallisesti lukea.
  • Dokumentaatio tietojen säilytysajoista ja siitä, kenellä toimittajan henkilöstöstä on pääsy hakijavastauksiin.

Itse pilotin aikana tarkista käsin satunnainen otos pisteytetyistä hakijoista ja vertaa arvioitasi koneen arviointeihin. Seuraa palautteeseen kuluvaa aikaa, sillä tämä luku kertoo, säästääkö työkalu tiimiltäsi tosiasiallisesti tunteja vai siirtääkö se vain pullonkaulaa. Lue hakijoille suunnatut selitykset kuin olisit itse hakija. Jos ne tuntuvat mustalta laatikolta, hakijatkin kokevat sen samoin.

Sopimuspuolella varmista, että toimittaja pystyy tuottamaan tarkastuslokit, määrittele, kenelle data kuuluu suhteen päättyessä, ja kirjaa ylös eskalointiasteet tilanteessa, jossa hakija riitauttaa tuloksen. Toimittajan osallistuminen ei koskaan siirrä oikeudellista vastuuta tuloksista toimittajalle. Se pysyy sinulla.

Ammattilaisen vinkki: Aseta ihmisen hyväksyntäkynnys ennen pilotin alkamista, esimerkiksi automaattinen manuaalinen tarkastus kaikille, jotka pistyttävät viiden pisteen sisällä raja-arvostasi. Tämän päättäminen tulosten näkemisen jälkeen kutsuu vinouman päätöksentekoon.

Automaattisen arviointipalautteen käyttöönotto ilman kontrollin menettämistä

Vastuullinen käyttöönotto noudattaa järjestystä, ei yhtä käynnistyspäivää.

  1. Kartoita tehtävä. Dokumentoi KSAO-ominaisuudet, joita työ tosiasiallisesti edellyttää, ja valitse yksi tai kaksi pilottitehtävää, joissa on riittävästi rekrytointivolyymia merkityksellisen datan tuottamiseksi.
  2. Määritä onnistumismittarit etukäteen. Päätä, miltä "toimiva" näyttää: palautteeseen kuluva aika, arvioijien yksimielisyysaste, hakijatyytyväisyys tai kaikki kolme.
  3. Toteuta pilotti ja testaa haitallisten vaikutusten varalta. Vertaa läpäisyprosentteja demografisten ryhmien välillä ennen kuin laajennat useampiin tehtäviin. Tässä jäsennelty haitallisen vaikutuksen testaus ansaitsee paikkansa.
  4. Rakenna tiedonanto- ja korjauspolut. Hakijoilla on oltava tapa pyytää mukauttamisia tai riitauttaa tulos ennen kuin siitä tulee lopullinen.
  5. Kouluta arvioijat ja aseta uudelleenvalidointikaienteri. Arvioijilla on oltava selkeät eskalointisäännöt, ja koko järjestelmän uudelleentarkistus on aikataulutettava, ei jätettävä sattuman varaan.

Vaiheiden ohittaminen nopeamman käynnistyksen toivossa on täsmälleen se, miten tiimit päätyvät selvittämään vinoumusvalituksia rekrytoinnin sijaan.

Mallipohjat hakija- ja arvioijayhteenvetoihin

Yhteenvedon muodolla on lähes yhtä suuri merkitys kuin itse pisteillä. Hakijalle suunnatun yhteenvedon tulisi nimetä arvioidut alueet, antaa konkreettisia todisteita ("sijoittui ylimpään neljännekseen tiedon tulkintaa koskevissa kysymyksissä") ja selittää, miten tarkistusta voi pyytää. Arvioijalle suunnattu yhteenveto tarvitsee päinvastaisen painotuksen: raakapisteet yhdistettynä tiettyihin KSAO-ominaisuuksiin sekä ehdotettu seuraava toimenpide, ei pelkästään yksi kokonaispistemäärä.

Muutama sääntö pitää molemmat dokumentit rehellisinä:

  • Säilytä raakavastaukset ja pisteytyslogiikka jokaisen yhteenvedon taustalla, jotta ihminen voi myöhemmin rekonstruoida päättelyn.
  • Yhdistä jokainen yhteenvedon väite siihen tiettyyn kysymykseen tai tehtävään, joka tuotti sen.
  • Älä koskaan esitä yhtä pistemäärää lopullisena sanana. Paranna sitä kontekstilla, jota rekrytoija voi punnita muuta näyttöä vasten – lähestymistapa, jota tehtäväkohtaisten testien rakentaminen käsittelee syvemmin.

Talent Approvedin Magic Create -ominaisuus rakentaa tehtäväkohtaiset arvioinnit suoraan työnkuvauksesta ja luo sitten nämä parilliset yhteenvedot automaattisesti, antaen arvioijille lähtökohdan tyhjän sivun sijaan.

Automaattisen palautteen käsitteleminen tukena, ei lopullisena tuomiona

Automaattisen palautteen käsitteleminen tukena, ei lopullisena tuomiona — yleiskuvauskaavio

Suurin virhe, jonka näen rekrytointitiimien tekevän, ei ole väärän alustan valitseminen. Se on unohtaminen, että generoitu yhteenveto on syöte, ei tuomio. Käsittele pistemäärää yhtenä datapisteinä, säilytä taustalla oleva näyttö, jotta voit myöhemmin puolustaa päätöstä, ja pidä ihminen mukana kaikessa, mikä koskee tarjousta tai hylkäystä.

Pilotit yllättävät ihmiset yleensä samalla tavalla: pistemääräjakauma näyttää hyvältä, kunnes joku pyytää validointiraporttia, eikä toimittajalla ole sellaista valmiina. Vaadi se ennen käynnistystä, ei valituksen jälkeen. Dokumentoi, miksi valitsit käyttämäsi kynnysarvot. Tämä paperijälki on se, joka suojaa rekrytointipäätöksiäsi kuukausia myöhemmin, kun joku väistämättä kysyy miksi.

— Jimmie

Miten Talent Approved sopii vastuulliseen käyttöönottoon

Talent Approved on rakennettu HR-tiimeille, jotka haluavat pisteytysnopeutta luopumatta tässä oppaassa läpikäydystä valvonnasta. Magic Create muuttaa työnkuvauksen tehtäväkohtaiseksi testiksi minuuteissa, huijaamisenesto-seuranta ja istuntotallenteet pitävät todisteet tallessa myöhempää tarkistusta varten, ja tekoälyn tuottamat yhteenvedot yhdistävät pisteet kontekstiin, jota arvioija todella tarvitsee.

Talent Approved

Tilauksen sijaan Talent Approved veloittaa 5 dollaria per suoritettu hakija-arviointi, joten pienen pilotin toteuttaminen yhdellä tai kahdella tehtävällä maksaa lähes mitään omaa validointitarkistuslistaasi vasten testattaessa. Ennen laajentamista pyydä näytteitä yhteenvedoista ja vinouman testausdataa samaan tapaan kuin tässä oppaassa suositellaan pyydettäväksi miltä tahansa toimittajalta. Käy sitten hinnoittelusivulla aloittaaksesi pilotin seuraavalle avoimelle tehtävällesi.

Lähteet

UKK

Mitä on automaattinen arviointipalaute rekrytoinnissa?

Se on tekoälyn tuottamia pisteitä, yhteenvetoja ja arvioijan muistiinpanoja, joita taitoja arvioiva alusta tuottaa sen jälkeen, kun hakija on suorittanut testin. Se tukee rekrytoijan päätöksiä, mutta toimii parhaiten yhdessä ihmisen suorittaman tarkastuksen ja dokumentoidun validiteettinäytön kanssa.

Onko automaattinen arviointipalaute juridisesti riskialtista?

Se voi olla, jos pisteitä ei validoida tai testata vinouman varalta. EEOC:n ohjeet vahvistavat, että työnantajat pysyvät vastuussa haitallisista vaikutuksista, vaikka toimittaja olisi rakentanut työkalun.

Kuinka paljon Talent Approved maksaa?

Talent Approved käyttää pay-as-you-go-mallia, jonka hinta on 5 dollaria per suoritettu hakija-arviointi, ilman tilausta.

Mistä tiedän, onko toimittajan palaute luotettavaa?

Pyydä validiteettinäyttöä, joka yhdistää pisteet työn kannalta relevantteihin taitoihin, viimeaikainen vinouman testausraportti ja näytteet tarkastuslokeista. Jos toimittaja ei pysty tuottamaan näitä, SIOP:n validointikehys sanoo, että pisteisiin ei tule vielä luottaa.

Pitäisikö hakijoiden voida valittaa automaattisesta pisteytuksestä?

Kyllä. Hakijoille tarjottava mahdollisuus riitauttaa tulokset ja saada oikea-aikaista, informatiivista palautetta parantaa oikeudenmukaisuuden kokemusta ja on SIOP:n hakijareaktiotutkimuksen keskeinen suositus.