Upphovsman:CC0 Public Domain
Abhishek Singh ställer en enkel fråga:Om röst är datorns framtid, vad sägs om dem som inte kan höra? Alexa är alla öron för döva samhället tack vare en app -prototyp som utan tvekan kommer att locka lite intresse och inspiration.
Trots allt, tekniker som tittar på experter har sagt att rösttekniken fungerar bra i våra datorterminer; som BBC News sa, "De senaste åren har en ökad popularitet för röstassistenter som drivs av Amazon, Google och Apple. "
Tack till Abhishek Singh, Alexa kan svara på teckenspråk. Vill du lägga till ägg på din inköpslista? Behöver du veta om det regnar på Manhattan? Inga problem, Alexa kan svara på sådana frågor för dem som inte kan tala tillräckligt tydligt eller höra.
Singhs geniala projekt involverade ett kamerabaserat system. Han hade tänkt på att det kan krävas för att hemapparater ska utformas med döva användare i åtanke. Som ett resultat, han riggade Amazons Alexa, sa BBC, att svara i text till amerikanskt teckenspråk (ASL).
Singh berättade för YouTube -besökare i en video som visar sitt teckenspråk i praktiken att han använde djupinlärning med TensorFlow.js för att få Amazon Echo att svara på teckenspråk.
Specifikt, som BBC noterade, "Utvecklaren utbildade en AI med hjälp av maskininlärningsplattformen Tensorflow, vilket innebar upprepade gånger att gestikulera framför en webbkamera för att lära systemet grunderna i teckenspråk. "
När systemet väl kunde reagera på hans handrörelser, han kopplade den till Googles text-till-tal-programvara för att läsa motsvarande ord högt.
Singh sa att från början "Som ett tankeexperiment, Jag använde djupinlärning för att få AIexa att svara på teckenspråk. "
Kameran tolkar användarens skyltar. Tecken konverteras till text och tal. "Alexa, Hej, "kommer högt och tydligt. "Hej, där." "Alexa, vad är vädret?" "Just nu i New York är det 29 grader Celsius med delvis solig himmel. Dagens prognos har massor av moln ..." "Alexa, vad är fem fot i meter? " "Fem fot är 1,5 meter." Och så vidare. Och vad skulle en sessionsrapport vara utan en begäran om ett skämt:"Alexa, berätta för mig ett skämt. "Jag ska inte upprepa det, bara för att det är halt. På den noten (kan inte skylla på honom) sa Abhishek "Alexa, Hejdå."
Frågan är, kan hans prototyp ha något inflytande på framtiden för röstassistenter? BBC citerade Singh för att säga att det inte fanns någon anledning att Amazon Show "eller någon av de kamera- och skärmbaserade röstassistenterna inte kunde bygga in den här funktionen direkt."
Snabbt företag citerade Singh:"I en idealisk värld skulle jag ha byggt detta direkt på showen, men enheterna är inte så hackbara ännu, så kunde inte hitta ett sätt att göra det. "
Mark Wilson, en författare på Snabbt företag , under tiden, sade Singh "kommer att öppna sin egen kod och dela hela metoden bakom den."
Han sa att Singh hoppades att andra människor kunde bygga vidare på det, eller till och med bara "inspireras till att utforska detta problemrum." Wilson hade en kortfattad sammanfattning av hur döva har lämnats kvar i ge-whiz-loppet för att presentera röstassistenter. Wilson sa att problemet var tvåfaldigt.
"Dessa enheter lärde sig aldrig att dechiffrera de talade rösterna hos personer med en extrem hörselnedsättning. Samtidigt, Allt som Home eller Alexa säger som svar kan inte höras av användaren. Lägga till en skärm för att visa information på en enhet som Echo Show kan hjälpa, men det kan bara få någon så långt om de vill ha ett naturligt samtal med en maskin. "
KnowTechie kallade det en "elegant" lösning och sa att "Det är häftigt att se utvecklare gå upp för tillgänglighet, men det skulle vara fantastiskt att se detta inbyggda. "
© 2018 Tech Xplore
