En användare trycker på tangenter för att välja en meny på toppnivå, undermeny, och klicka sedan genom alternativen på en kapslad lista för att boka en sightseeingaktivitet via Airbnb. Kredit:University of Washington
Att bläddra igenom erbjudanden på Airbnb innebär att klicka på rader med foton för att jämföra alternativ från potentiella värdar. Den här typen av tabellbaserad navigering är allt mer central i våra digitala liv - men det kan vara tråkigt eller omöjligt för personer som är blinda eller har nedsatt syn att navigera på dessa moderna webbsidor med traditionella skärmläsare.
En ny metod utvecklad av ingenjörer vid University of Washington och Carnegie Mellon University använder tangentbordet som ett tvådimensionellt sätt att komma åt tabeller, kartor och kapslade listor. Resultat som ska presenteras den 25 april på CHI 2018-konferensen i Montreal finner att detta verktyg låter blinda och synskadade användare navigera mycket mer framgångsrikt i den här typen av webbplatser än bara skärmläsare.
"Vi försöker inte ersätta skärmläsare, eller de saker som de gör riktigt bra, " sa seniorförfattaren Jennifer Mankoff, en professor vid UW:s Paul G. Allen School of Computer Science. "Men tabeller är en plats där det är möjligt att göra bättre. Den här studien visar att vi kan använda tangentbordet för att få konkreta, strukturerad information tillbaka, och fördelarna är enorma."
Det nya verktyget, Interaktionstekniker för rumslig igenkänning, eller SPRITEs, mappar olika delar av tangentbordet till områden eller funktioner på skärmen. En forskningsstudie frågade 10 personer, varav åtta var blinda och två med nedsatt syn, att slutföra en rad uppgifter med hjälp av deras favoritteknik för skärmläsare, och sedan använda den tekniken plus SPRITEs. Efter en 15-minuters handledning, tre gånger så många deltagare kunde slutföra spatial webbsurfningsuppgifter inom den givna tidsgränsen med SPRITEs, även om alla hade erfarenhet av skärmläsare.
Verktyget SPRITEs använder nycklar för att navigera på en webbsida. De tre översta raderna aktiverar meny- och undermenyalternativ. Tangenterna längs den översta raden och ytterkanterna fungerar som horisontella och vertikala koordinater för en tabell eller karta. Kredit:University of Washington
Verktyget låter användare trycka på tangenter för att uppmana skärmläsaren att flytta till vissa delar av webbplatsen. Till exempel, siffertangenter, längst upp på tangentbordet, karta till menyknappar. Dubbelklicka på ett nummer öppnar menyobjektets undermeny, och sedan låter den översta raden med bokstäver användaren välja varje objekt i undermenyn. För tabeller och kartor, tangenterna på utsidan av tangentbordet fungerar som koordinater som låter användaren navigera till olika områden av den tvådimensionella funktionen.
Att trycka på en sifferknapp kan öppna en ikon för varje Airbnb-menyalternativ, till exempel. Att sedan trycka på bokstaven "u" kan läsa upp posten som säger om den här värden kommer att acceptera husdjur.
"Istället för att behöva bläddra linjärt genom alla alternativ, vårt verktyg låter människor lära sig strukturen på webbplatsen och sedan gå direkt dit, " sa Mankoff. "Du kan lära dig vilken del av tangentbordet du behöver för att hoppa direkt ner och kolla, säga, om hundar är tillåtna."
De flesta av testdeltagarna kunde inte slutföra en uppgift som att hitta ett objekt i en undermeny eller hitta specifik information i en tabell med sin favoritskärmläsare, men kunde slutföra det med SPRITEs. "Mycket fler människor kunde förstå strukturen på webbsidan om vi gav dem en taktil feedback, " sa medförfattaren Rushil Khurana, en doktorand vid Carnegie Mellon University som genomförde testerna i Pittsburgh. "Vi försöker inte ersätta skärmläsaren, vi försöker arbeta tillsammans med det."
Fler studiedeltagare skulle kunna utföra uppgifter som involverar menyer, tabeller och kartor genom att använda SPRITEs (orange staplar) jämfört med att använda enbart en skärmläsare (blå staplar). Kredit:University of Washington
För enkla textbaserade uppgifter som att hitta en given avsnittsrubrik, räkna rubriker på en sida eller hitta ett specifikt ord, deltagarna kunde slutföra dem framgångsrikt med båda verktygen.
SPRITEs är ett av en uppsättning verktyg som Mankoffs grupp utvecklar för att hjälpa synskadade användare att navigera i objekt på en tvådimensionell skärm. En etnografisk studie 2016 ledd av doktoranden Mark Baldwin och fakultetsmedlemmen Gillian Hayes, både vid University of California, Irvine, observerade ett dussin elever under fyra månader medan de lärde sig att använda tillgängliga datorverktyg, för att hitta förbättringsområden inom skärmlästeknik.
Nu när teamet har utvecklat och testat SPRITEs, den planerar att göra systemet mer robust för alla webbplatser och sedan lägga till det i WebAnywhere, en fri, online skärmläsare utvecklad vid UW. Att lägga till SPRITEs skulle låta användare navigera med sitt tangentbord medan de använder WebAnywhere-plugin för att läsa information som visas på en webbsida. Teamet planerar också att utveckla en liknande teknik som skulle förstärka skärmläsningstekniken på mobila enheter.
"Vi hoppas kunna distribuera något som kommer att göra skillnad i människors liv, " sa Mankoff.