Testsessie formulieren met blinde screenreadergebruikers

[rianrietveld]

Probleem

Hoe gebruiken blinde mensen een webformulier? Nu we de NLDS richtlijnen voor formulieren uitgeschreven hebben valt op dat we soms aannames doen. Graag zouden we dit willen testen met blinde eindgebruikers.

Dit is een voorstel om gebruikersonderzoek te organiseren.

Bij veel richtlijnen ontbreekt gebruikersonderzoek. Bijvoorbeeld voor het verwerken van foutmeldingen en het logisch weergeven van inhoud. Steeds weer komt de vraag terug: maar hoe gebruiken volkomen blinde mensen nu echt een formulier? Op welke wijze verwerken ze de informatie (read mode/form mode). Hoe krijgen ze foutmeldingen te weten, hoe navigeren ze door een formulier. Is dit per screenreader verschillend?

Wat te testen

We maken een paar formulieren, bijvoorbeeld.

• Op Gemeente Voorbeeld volgens de NLDS richtlijnen en met NLDS-componenten.
• Met Gravity Forms volgens de NLDS richtlijnen.
• Met “fouten”, zoals tekst tussen de velden en anders opgezette foutmeldingen

We (NLDS-kernteam) schrijven zelf het testscenario, bouwen de formulieren (of laten die bouwen) en doen zelf het gebruikersonderzoek. We filmen de testsessies. We kunnen kijken of we de WMEBV-formulieren kunnen hergebruiken, na een toegankelijkheids- en NLDS-richtlijnen check.

Hoe te testen

We vragen een testteam van volkomen blinde screenreadergebruikers door de formulieren te gaan om te onderzoeken hoe ze de formulieren gebruiken en of de aannames die we doen ook kloppen. Bijvoorbeeld 2 gebruikers met NVDA, 2 met JAWS, 2 met Voice Over.

Een goede optie voor een testteam is die van de Oogvereniging. Ze hebben een pool van 60 testers.

Kosten Oogvereniging (voor 2024): starttarief is 250 euro voor 2 testers, elke tester erbij kost 50 euro extra. Kosten per tester: reiskostenvergoeding en 25 euro per dagdeel. Dus 6 testers kost ca 750 euro, afhankelijk van de reiskosten. De testers nemen hun eigen apparatuur mee.

Op locatie bij ICTU is het beste, zo vlak naast het station Laan van NOI. De Oogvereniging zit in Utrecht, ver van het station. Als we de tekst voor de oproep schrijven en mailen, zet de contactpersoon de oproep uit en verwacht al dezelfde dag antwoord. Gebruikersonderzoek doen in eind april/begin mei is prima te organiseren.

Van de gebruikersonderzoeken maken we losse video’s en een verslag, wat we publiceren op gebruikersonderzoeken.nl

What’s in it for us

• Gebruikersonderzoek op maat voor de NLDS-richtlijnen. We voegen aan de NLDS-richtlijnen, en zo nodig andere documentatie, het relevante gebruikersonderzoek toe, inclusief video’s. Wat de geloofwaardigheid en de autoriteit van de richtlijnen vergroot.
• Naast elkaar laten zien van goed / niet goed is super duidelijk voor managers en stakeholders. En kan een motivatie zijn om de richtlijnen te gaan toepassen en mee te doen met het NLDS. De PR afdeling kan hiervoor uit de resultaten plukken.
• Hidde kan de resultaten gebruiken bij zijn presentatie op het Nationaal Congres Digitale Toegankelijkheid (NCDT) in juni.
• Content voor een of meerdere blogposts, presentaties en ander PR materiaal.

Werk

• Test-scenario’s maken
• Formulieren maken
• Testers verzamelen
• Onderzoek doen
• Video’s editing
• Rapportage schrijven
• De content gebruiken voor marketing en documentatie

Tijd

Voorstel is om hier 1 sprint aan te wijden, midden april, zodat Hidde genoeg tijd heeft om uit de resultaten te plukken voor het NCDT congres.

• Rian: 1 sprint : test scenario maken, Gravity Forms formulieren maken, testen organiseren en begeleiden en rapportage.
• Programmeurs: ?? uur voor het maken/ aanpassen van formulieren.
• Hidde: 1 dag: meedenken over scenario, test mede-bijwonen/begeleiden, video's editen.
• Jeffrey: 1 dag: meedenken over scenario, test mede-bijwonen/begeleiden.
• En iedereen die verder nog mee wil denken/kijken

En in een later stadium voor het PR-team: promotiemateriaal, presentaties en blogposts maken.

[hidde]

Extra voordeel: mogelijk bruikbaar als extra bewijs in estafettemodel.

[jeffreylauwers]

Strak verhaal. Zou onze richtlijnen nog meer kracht bijzetten 💪.

Moeten we in de afstemming met respondenten wel goed vastleggen dat de opnames van het onderzoek openbaar (documentatie website en presentaties) gedeeld worden. Dit deden we bij het WMEBV onderzoek ook, maar daar trok 1 respondent zijn medewerking in. Hopelijk kunnen we dit voorkomen als dit meeweegt in de selectie van respondenten.

[rianrietveld]

Related: https://github.com/nl-design-system/documentatie/issues/750: Richtlijnen: is het nog essentieel om alle niet form-control gerelateerde info buiten het formulier te houden