Tilgjengelig vurdering: NCEO-trinn, seks perspektiver og raske brukervennlighetstester

Tilgjengelighet i vurdering betyr å utforme tester slik at de måler den tiltenkte ferdigheten for alle deltakere, uavhengig av funksjonsnedsettelse, språklig bakgrunn eller hvordan de samhandler med teknologi. Det aller mest nyttige første steget er å planlegge for universell utforming før man skriver et eneste spørsmål, og deretter gjennomføre en tilgjengelighetsjekk på elementnivå før testen når en testdeltaker. Føderal lov støtter dette: ADA krever at testorganisasjoner tilbyr eksamener på et sted og på en måte som er tilgjengelig for personer med funksjonsnedsettelser.

TL;DR:

• Universell utforming bør planlegges fra starten, med tilgjengelige formater som tagget PDF eller HTML for å unngå kostbare etterjusteringer.
• Støttetiltak kategoriseres i universelle verktøy, utpekte støtter og tilrettelegginger, der hver kategori krever ulike nivåer av godkjenning og dokumentasjon.
• Tilgjengelighetsbeslutninger må tas raskt for å forhindre at like muligheter nektes, og tilrettelegginger bør ikke undergrave validiteten til vurderingen.
• Å gjennomføre tilgjengelighetsvurderinger på elementnivå og brukerpilotter med brukere av hjelpemiddelteknologi kan avdekke barrierer som samsvarskontroller kan overse.
• Å integrere vurderingsverktøy i undervisningen og kjøre små pilottester kan betydelig forbedre testdeltakernes resultater og redusere behovet for spesielle testøkter.

Innholdsfortegnelse

• Hva tilgjengelighet i vurdering faktisk innebærer
• Juridiske forpliktelser enhver testdesigner bør kjenne til
• Universell utforming i praksis: Sette NCEOs trinn ut i handling
• En praktisk sjekkliste for tilgjengelighet på elementnivå
• Teste testen: Brukervennlighets- og tilgjengelighetspilotter
• Opplæring og kommunikasjon for testadministratorer
• Hva som skjer når team faktisk følger universell utforming
• Sjekklisten slår leverandørpitchen
• Hvor Talent Approved passer inn i en tilgjengelig arbeidsflyt
• Kilder
• FAQ

Hva tilgjengelighet i vurdering faktisk innebærer

De fleste vurderingsprogrammer organiserer støttetiltak i tre nivåer, og å blande dem sammen er en av de vanligste feilene team gjør. Universelle verktøy er tilgjengelige for alle testdeltakere uten behov for forespørsel. Tenk tekst-til-tale, zoom, uthevere og svarskjuling. Utpekte støtter krever en beslutning fra en pedagog eller et team, vanligvis fordi funksjonen endrer testopplevelsen for noen elever, for eksempel endringer i fargekontrast eller eget testlokale. Tilrettelegginger er den mest restriktive kategorien, knyttet til en dokumentert plan som en IEP eller 504, og inkluderer ofte ting som utvidet tid eller en sekretær.

Statlige testprogrammer illustrerer dette godt. California Department of Educations matrise for tilgjengelighetressurser lister opp dusinvis av innebygde og ikke-innebygde støtter på tvers av disse tre nivåene for statens vurderinger. Distinksjonen har operasjonell betydning:

• Universelle verktøy krever null papirarbeid og bør være tilgjengelige i daglig undervisning, ikke bare på testdagen.
• Utpekte støtter krever en teamavgjørelse, men ikke en medisinsk eller pedagogisk diagnose.
• Tilrettelegginger krever dokumentasjon og logges vanligvis i et registreringssystem før testing begynner.

Juridiske forpliktelser enhver testdesigner bør kjenne til

Seksjon 309 i ADA er ankerregel for enhver organisasjon som administrerer eksamener, fra lisensnemnder til arbeidssertifiseringsprogrammer. Den krever at testorganisasjoner tilbyr eksamener «på et sted og på en måte som er tilgjengelig for personer med funksjonsnedsettelser» og gir rimelig tilrettelegging på forespørsel, ifølge Department of Justices veiledning om tilrettelegging ved testing.

Dokumentasjonsstandarden er snevrere enn de fleste antar. Testorganisasjoner kan be om dokumentasjon, men den må være rimelig og målrettet, ikke et uttømmende papirspor. Å akseptere dokumentasjon fra en kvalifisert fagperson uten å kreve overdrevet tilleggsdokumentasjon forkorter godkjenningstidene og holder prosessen i samsvar med regelverket.

To forpliktelser er det som snubler opp vurderingsteam mest: aktualitet og bevaring av validitet. En avgjørelse om en tilretteleggingsforespørsel kan ikke ligge i en kø i uker. Forsinkede svar kan utgjøre en nektelse av like muligheter, ifølge det samme tekniske assistansedokumentet fra ADA. Og uansett hvilken tilrettelegging som innvilges, må den bevare det testen måler. En høytlesingsakkommodasjon på en leseforståelseseksamen kan for eksempel undergrave selve det konstruktet testen prøver å vurdere, og det er grunnen til at lisensmyndigheter gransker disse beslutningene nøye.

Universell utforming i praksis: Sette NCEOs trinn ut i handling

National Center on Educational Outcomes legger frem en ni-trinns prosess for å bygge vurderinger med tilgjengelighet innebygd fra dag én, beskrevet i sin statsveiledning for universelt utformede vurderinger. Komprimert til praktiske tiltak ser dette slik ut for et vurderingsteam:

1. Planlegg for tilgjengelighet før du skriver spørsmål, ikke etter at en pilot avdekker problemer.
2. Definer konstruktet presist slik at du vet hva testen må måle og hva som er tilfeldig for den.
3. Krev universell utforming i leverandørforespørsler (RFP-er), slik at tilgjengelighet ikke blir et ubetalt tillegg som forespørres senere.
4. Involver tilgjengelighetskompetanse under utforming av spørsmål, ikke bare under en samsvarsvurdering.
5. Kjør brukervennlighetstesting med et representativt utvalg før testen lanseres.
6. Gjennomfør prøvekjøringer av spørsmål og tester, og analyser resultatene før full utrulling.
7. Overvåk og revider hver syklus, siden tilgjengelighetsbehov endres i takt med at befolkningsgrupper og teknologi endrer seg.

Den tekniske siden er like viktig som prosesssiden. Bygg vurderinger i semantiske, interoperable formater som tagget PDF, HTML eller QTI der det støttes, fremfor låste proprietære filer som krever manuell utbedring senere – et poeng som understrekes i Massachusetts DOEs tekniske veiledning. Å tilpasse seg WCAG og Section 508-standarder fra starten unngår kostbare etterjusteringer.

Proffips: Bruk de samme tilgjengelighetsverktøyene under undervisningen som du planlegger å bruke under vurderingen. Når elever allerede vet hvordan tekst-til-tale eller zoomverktøyet deres fungerer, måler testen ferdigheten, ikke deres evne til å lære et nytt grensesnitt under press.

En praktisk sjekkliste for tilgjengelighet på elementnivå

Å oppdage barrierer før en test lanseres er langt billigere enn å fikse dem etter at et kull allerede har tatt den. Massachusetts DOE bygde en sjekkliste og gjennomgangsprotokoll rundt seks linser som ethvert team kan tilpasse.

• Språklige krav: Er ordforrådet mer komplekst enn konstruktet krever?
• Kulturell skjevhet: Forutsetter spørsmålet en felles erfaring som noen testdeltakere ikke vil ha?
• Ferdighetskrav: Tester spørsmålet den tiltenkte ferdigheten, eller tester det også stilltiende lesehastighet eller motorisk koordinasjon?
• Presentasjon og lesbarhet: Vil teksttetthet, skriftstørrelse eller layout unødvendig bremse en leser med nedsatt syn?
• Svarmodus: Kan en testdeltaker svare hvis de ikke kan bruke mus, eller ikke kan skrive for hånd?
• Utmattelse: Vil spørsmålslengden eller testvarigheten introdusere feil som ikke er relatert til ferdigheten som måles?

Gjennomgangsprotokollen fungerer best som en teamaktivitet. Tildel gjennomgangspersoner spesifikke linser, logg hvert problem med en spesifikk plassering og foreslått løsning, og samle deretter teamet for å konsolidere revisjoner fremfor å la én person avgjøre alt alene.

Teste testen: Brukervennlighets- og tilgjengelighetspilotter

Å kjøre en brukervennlighetspilot krever ikke et spesialisert laboratorium. En ekstern tenk-høyt-økt, der noen få testdeltakere forteller om tankeprosessen sin mens de arbeider gjennom spørsmål, avdekker friksjonspunkter raskt. En gjennomgang med skjermleser med bare tre eller fire brukere av hjelpemiddelteknologi fanger opp problemer som en spørsmålsforfatter uten funksjonsnedsettelser aldri vil legge merke til, som et diagram som leses som en meningsløs rekke av tall.

Beregningene som er verdt å spore er enkle:

Den vanskeligere disiplinen er å kombinere disse brukervennlighetsfunnene med psykometriske kontroller. En tilgjengelighetsfiks som endrer vanskelighetsgraden på et spørsmål eller viser differensiell spørsmålfunksjon på tvers av grupper trenger en ny vurdering før den sendes ut – et trinn NCEOs veiledning behandler som ikke-forhandlingsbart. Tilgjengelighet og validitet er ikke konkurrerende mål. Å gjennomgå dem sammen, fremfor sekvensielt, er det som hindrer en løsning i å stille og rolig bryte det testen måler. Team som trenger en strukturert måte å spore denne typen data på elementnivå kan finne det nyttig å lese om målingsbasert vurderingsanalyse.

Opplæring og kommunikasjon for testadministratorer

Tilrettelegginger fungerer bare hvis menneskene som kjører testdagen vet hvordan de skal aktivere dem. Administratoropplæring bør dekke korrekt inntasting av innebygde innstillinger på forhånd, håndtering av siste øyeblikks tilretteleggingsforespørsler uten å spore av planen, og bekreftelse av at hjelpemiddelteknologi og enheter faktisk fungerer før testvinduet åpnes – en praksis som gjenspeiles i Smarter Balanced's retningslinjer for brukervennlighet og tilrettelegginger.

Familier og elever trenger også forhåndsvarsel, sammen med en mulighet til å øve med de faktiske verktøyene før innsatsen er reell.

• Bekreft at innebygde innstillinger er angitt før testvinduet åpnes.
• Gi testdeltakerne en øvingsøkt med de nøyaktige verktøyene de vil bruke på testdagen.
• Sjekk enheter, hodetelefoner og hjelpemiddelteknologi dagen før, ikke om morgenen.

Proffips: Send tilretteleggingsbekreftelser skriftlig minst én uke før testing. En muntlig «ja» som aldri gjør det inn i systemet er den aller vanligste årsaken til tilretteleggingsfeil på testdagen.

Hva som skjer når team faktisk følger universell utforming

Vurderingsteam som bygger tilgjengelighet inn fra starten, fremfor å ettermontere det etter en klage, har en tendens til å se færre spesielle testøkter å planlegge og høyere fullføringsrater totalt sett. Å integrere verktøy som tekst-til-tale i hverdagslig undervisning, ikke bare testen, viser målbare gevinster i fullføring og testdeltakernes selvtillit, ifølge ReadSpeakers artikkel om inkluderende eksamensdesign.

Plattformer kan akselerere deler av denne arbeidsflyten, men de erstatter ikke den menneskelige vurderingen bak den. Et verktøy kan flagge en manglende alt-tekst-tag; det kan ikke avgjøre om en tilrettelegging bevarer det konstruktet du tester. Det ansvaret forblir hos designteamet, uansett hvor mye automatisering som omgir det.

Sjekklisten slår leverandørpitchen

Her er det forskningen på dette emnet faktisk støtter, og det går imot mye konvensjonell visdom: å kjøpe en «tilgjengelig» testplattform er ikke det samme som å ha en tilgjengelig vurdering. Samsvarsleverandører vil gjerne selge deg WCAG-samsvar på leveringslaget, mens spørsmålene selv fortsatt begraver et matteproblem inne i tre setninger med irrelevant kontekst, eller forutsetter kulturkunnskap som ikke har noe med ferdigheten som måles å gjøre. Plattformen var aldri det svake leddet.

Sjekklisten på elementnivå er uglamorøs, og det er nøyaktig grunnen til at de fleste team hopper over den. Det er ikke en innkjøpsbeslutning. Det er en tirsdagsettermiddag tilbrakt med tre gjennomgangspersoner som diskuterer om ordforrådet i et matematikkproblem tester matematikk eller lesing. Det argumentet, gjentatt på tvers av hvert spørsmål på testen, er der tilgjengelighet faktisk bygges. Leverandørens tilgjengelighetsfunksjoner betyr noe, men de er et gulv, ikke en strategi.

Hvis du bare gjør én ting annerledes etter å ha lest dette, gjør det til brukervennlighetspiloten. En liten gruppe brukere av hjelpemiddelteknologi som arbeider seg gjennom testen din kan avdekke flere reelle barrierer enn en samsvarskontroll ofte vil gjøre, og du trenger ikke et spesialisert laboratorium eller en leverandørkontrakt for å kjøre en.

— Jimmie

Hvor Talent Approved passer inn i en tilgjengelig arbeidsflyt

Talent Approved vil ikke erstatte protokollen din for gjennomgang av spørsmål, og det bør den ikke prøve på. Det den gjør bra, er å ta den manuelle byrden fra de delene av arbeidsflyten som spiser mest tid. Et verktøy som bygger en rollespesifikk vurdering fra en stillingsbeskrivelse på noen minutter, lar gjennomgangspersonene dine bruke timene sine på tilgjengelighetslinser som betyr noe – språk, kultur, ferdighetskrav, utmattelse – i stedet for å utforme spørsmål fra bunnen av.

Juks-overvåking og AI-genererte ytelsesoppsummeringer kan håndtere gjennomgangssiden når testene er live, og gir ansettelseteam en klar, konsistent lesning av resultater uten å legge administrativ byrde til tilretteleggingsbehandlingen. Ingenting av dette erstatter planlegging av universell utforming fra starten eller kjøring av din egen brukervennlighetspilot. Det betyr bare at verktøyene rundt disse beslutningene ikke bremser deg. Hvis teamet ditt er klart til å bygge en rollespesifikk vurdering og se hvordan arbeidsflyten holder seg mot din egen tilgjengelighetsjekkliste, kan du prøve Talent Approved direkte.

Kilder

• ADA-krav: Tilrettelegging ved testing
• En oppdatert statsveiledning for universelt utformede vurderinger (NCEO Report #431)

FAQ

Hva er tilgjengelighet i vurdering?

Tilgjengelighet i vurdering betyr at en test måler den tiltenkte ferdigheten eller kunnskapen for alle testdeltakere, uavhengig av funksjonsnedsettelse, språklig bakgrunn eller teknologien de bruker til å svare. Det krever å designe med universelle verktøy, utpekte støtter og tilrettelegginger innebygd fremfor lagt til i etterkant.

Hva er eksempler på tilrettelegginger i vurdering?

Vanlige tilrettelegginger inkluderer utvidet tid, en sekretær eller leser, eget testlokale, kompatibilitet med skjermleser og alternative svarmodi som stemmeinput. Tilrettelegginger er vanligvis knyttet til dokumentasjon som en IEP eller 504-plan, i motsetning til universelle verktøy, som er tilgjengelige for alle.

Hva er de fire typene tilgjengelighetsbarrierer å sjekke for?

En praktisk gjennomgang sjekker fire kjerneområder: språklige krav, kulturell skjevhet, ferdighetskrav utover det testede konstruktet og fysiske eller sensoriske barrierer som presentasjon, lesbarhet og svarmodus. Utmattelse fra testlengde er en femte linse mange team legger til for å fange opp feil som ikke er relatert til ferdigheten som måles.

Hvilke verktøy støtter tilgjengelige nettbaserte vurderinger?

Universelle verktøy som tekst-til-tale, zoom og svarskjuling, kombinert med semantiske og interoperable filformater som tagget PDF eller HTML, utgjør det tekniske ryggraden i tilgjengelig nettbasert testing. Plattformer som Talent Approved kan fremskynde byggingen av rollespesifikke tester, men tilgjengelighetsvurderingen og brukervennlighetstestingen må fortsatt skje på selve spørsmålsinnholdet.

Hvor lang tid bør tilretteleggingsbeslutninger ta?

ADA fastsetter ikke et fast antall dager, men veiledningen er tydelig på at unødvendige forsinkelser kan utgjøre en nektelse av like muligheter. Testorganisasjoner bør bygge en svarstidslinje inn i prosessen sin fremfor å la tilretteleggingsforespørsler ligge ubesvart nær testdagen.

Anbefalt

• Slik tilpasser du vurderinger for nisjeroller i bransjen
• Bygg vurderingsrubrikker som pedagoger kan pilotere og skalere med AI
• Jobber med sans for detaljer: Vurderinger som faktisk forutsier det
• Stopp skjev ansettelse: Sjekkliste for lokaliseringsstrategi for vurdering for HR