Liksom talade språk utvecklas teckenspråk organiskt och har inte alltid samma ursprung. Detta ger olika sätt att kommunicera och kommentera. Detta är ämnet för Manolis Fragkiadakis doktorsexamen. avhandling.

"Tvärtemot vad många antar finns det faktiskt inget universellt teckenspråk", säger Fragkiadakis. "Teckenspråk kan vara ännu mer fragmenterat än talat språk:det kan finnas flera språk i samma land. Fragmenteringen gör det svårt att kodifiera teckenspråk eller skriva om det akademiskt. Det vill vi ändra på."

"Vi har därför skapat ett verktyg för ordböcker för teckenspråk", förklarar Fragkiadakis. "För detta använder vi maskininlärning, en form av AI. Genom att analysera ledernas position och rörelser i de signerande händerna måste systemet identifiera vilket ord från vilket språk som signeras."

Detta visade sig inte alls vara okomplicerat. "De senaste årens tekniska utveckling är ännu inte kompatibel med teckenspråk, så det går fortfarande långsamt", förklarar Fragkiadakis. "De stora språkmodellerna vi för närvarande har är bara tränade på ett teckenspråk och i det mesta av videomaterialet som används för detta ser man undertecknaren stå precis framför kameran, så tecknen är lätta att se.

"I min forskning tränade vi AI på både flera teckenspråk och flera högtalare. För detta placerades kameran mellan två högtalare, så AI:n var tvungen att kunna extrahera samma information från en annan position."

För närvarande har denna teknik främst resulterat i att mer information är känd om olika teckenspråk, men för framtiden ser Fragkiadakis även praktiska tillämpningar inom teckenspråksgemenskapen. "I framtiden kan AI hjälpa till att känna igen både gemensamma drag och skillnader mellan olika teckenspråk, vilket underlättar kommunikationen mellan användare."

Dessutom säger Fragkiadakis att det är användbart att hans forskning har hjälpt till att bättre identifiera skillnaderna mellan teckenspråk. Till exempel, hur spelar kultur en roll? "Jag är grek, så jag använder mycket utrymme för att skriva under", säger Fragkiadakis, "det här kan ändra innebörden av det jag vill säga. Större gester kan till exempel signalera att någon "ropar", men de gör det inte. det behöver inte vara."

I slutändan bör denna kunskap förbättra tillgängligheten för teckenspråk. "Förhoppningen är att vi med den här forskningen ska kunna göra teckenspråk mer tillgängligt för alla, från akademiker till vardagliga talare. Det finns fortfarande för lite kunskap om olika teckenspråks egenskaper och det vill vi ändra på."

Tillhandahålls av Leiden University