Performance of Sorcieres:dansa tillsammans med smartphones
"Under det senaste decenniet har maskininlärning, som är en del av artificiell intelligens (AI), har gett oss självkörande bilar, praktisk taligenkänning, effektiv webbsökning, och en avsevärt förbättrad förståelse av det mänskliga genomet." (Lee Bell, Trådbunden, 2016)
Med maskininlärning, vi kan också nu lära våra gester till en maskin med hjälp av mikrosensorn och deras data finns redan överallt. Rörelser kan kännas igen, memorerade, tolkas och delas genom nätverk. Det finns många tillämpningar inom hälsa, sport och särskilt utbildning i den digitala tidsåldern. En färsk artikel i världen sade:
"Driven av framsteg inom artificiell intelligens och naturlig språkbehandling, rösten etablerar sig långsamt som det nya gränssnittet för att nå det digitala universum. "
Gester är alltså ett nytt framväxande gränssnitt för att nå det digitala universum.
Miljarder sensorer
Under de senaste 10 åren, mikrosensorer har förökat sig och invaderat våra liv. De upptäcker och mäter ständigt våra rörelser. Vi vet, men ofta märker vi inte ens, att de hela tiden räknar våra dagliga steg. Upp till 100 mätningar per sekund för var och en av dessa miljarder sensorer i våra liv. Vad är meningen med alla dessa uppgifter? Vad är deras närvaro i våra liv? Svaret kan vara "viktigt, men inte så mycket", då digital teknik idag främst bygger på allestädes närvarande skärmar. De sätter en sådan press på våra dagliga liv att de ersätter bilder med den verkliga världen, och faktiskt stoppa kroppen.
Med data från rörelsemikrosensorer, bearbetas av maskininlärning i realtid, vi försöker komma tillbaka till den verkliga världen:kan vi föreställa oss en digital värld utan skärmar och tangentbord, som skulle få oss att älska att kommunicera genom rörelser och gester med hjälp av våra mobiltelefoner? Kan vi alla vara dansare i den digitala tidsåldern? Kan denna fantastiska bild göras verklig genom alliansen av sensorer och maskininlärning för att bearbeta deras data i realtid och lägga dem i våra händer?
Ett nytt verktyg för hemrehabilitering
Rehabilitering var vår första upplevelse. Att skriva in dessa frågor genom denna applikation var det självklara att göra. Hur kan man bäst följa med en patient som kommer hem efter en knä- eller höftledsplastik? Med hjälp av en alltmer individualiserad teknisk miljö, byggs upp genom nära samarbete med vårdpersonalen. Detta är hjärtat i samarbetet med traumaavdelningen på Lariboisière-sjukhuset i Paris. Applikationen som utvecklades är baserad på länken mellan sensorer, intelligent databehandling och utformningen av patientgränssnittet. I praktiken, en liten elektronisk platta som smartphonesensorerna och ett wi-fi sitter ihop på sys in i strumpan eller plagget.
Bevittnat av en sjukgymnast, patienten lär maskinen gränsen för hans eller hennes ställningar, utanför vilken en varningssignal ges. Detta kan alltså praktiseras i patientens dagliga liv, under denna tekniks vaksamma blick. Individualisering är en viktig aspekt av denna e-coach. Visa mig hur du rör dig...
Rörelsemätning och databehandling har en dubbel nytta för patienten. Realtidskontrollen av signalen ökar hans eller hennes konfidenszon. Patienten vet också att data överförs och analyseras av vårdgivare om situationen kräver det.
Förbättra våra gester för att lära dem bättre?
Videon ovan visar hur det är möjligt att associera vilken typ av tecken eller digital information som helst med gester och rörelser. Detta exempel är baserat på Frédéric Bevilacqua-gruppens arbete vid IRCAM (Institut de Recherche et Coordination Acoustique Musique) i Paris. Det är ingen överraskning att IRCAM, finansierad av kompositören Pierre Boulez, är en nyckelspelare i denna forskning. I listan över våra finaste och svåraste gester att förvärva, de som påtvingas av musikinstrument är bland dem som ligger i topp. Kan du lära dig att göra musik genom att flytta en smartphone?
Här kan du prova dialogen med inlärningsmaskinen. Detta är webbapplikationen COMO producerad av IRCAM. Lär dig dina egna gester till din smartphone och lek med ljuden. Från IRCAM, denna teknik har spridit sig till Centre for Research and Interdisciplinarity (CRI) vid Université Paris Descartes, ett nav för experiment och pedagogisk innovation. I ett "rörelselabb", CRI Paris tar itu med "frågan om gester som ett framväxande gränssnitt för att nå det digitala universum" utifrån lärande och utbildningssynpunkt.
Hur lär vi oss idag? Faktiskt, hur kan vi lära oss att lära oss när världen förändras så snabbt och djupt? Hur bygger man detta lärande samhälle? Svaret från Francois Taddei, chef för CRI:genom att arbeta tillsammans med vänlighet och genom att behålla en känsla av häpnad när man ser på världen. Att använda dessa tekniker för livslångt lärande i en värld som har blivit massivt digital är spännande men svårt. Faktiskt, ingen är här en expert, eftersom detta tekniska genombrott tar oss bortom de vanliga tankemönstren. Men det finns goda nyheter:när vi alla flyttar, alla är välkomna på båten...
Från vetenskapsmän till samtida dans
Det tog mig lite tid att förstå varför forskare och studenter kommer från samtida dans, datavetenskap och naturligtvis robotik, design, pedagogik, textil, fysik, mekanik, antropologi, hälsa, sporter, musik, ljud och mer samlas kring IRCAM, CRI Paris och designskolan ENSCI Les Ateliers. I verkstäderna finns alla dessa människor vi utforskar scenarier för att använda dessa fascinerande men också förvirrande verktyg. Till exempel, Jag lärde mig en gång en gest till min smartphone, när jag försökte replikera den kunde maskinen inte känna igen den. En dansare som var med tog min smartphone och efterliknade min gest. De båda kunde snabbt identifiera "min gest".
Om gesten kan bli ett gränssnitt för att nå det digitala universum, då dyker ett nytt sätt att röra sig upp. Det leder till att vi uppmärksammar rörelser som vi gör varje dag utan att tänka på dem. I Le Geste et la Parole (1965), skriven av André Leroi-Gourhan i en då icke-digital värld:
"Akrobatiken, balanseringsövningarna, dansen materialiserar i stor utsträckning ansträngningen att subtraktera från normala driftkedjor, sökandet efter en skapelse som bryter den dagliga cykeln av positioner i rymden."
Jag kunde inte ha sagt det bättre. Och verkligen, det är inte en överraskning att ett samarbete med samtida dans snabbt har etablerat sig i denna forskning om gester och rörelser från teknik och vetenskap.
Denna artikel publicerades ursprungligen på The Conversation. Läs originalartikeln.