Aristo har klarat ett amerikanskt åttonde klass vetenskapstest. Om du får veta att Aristo är ett allvarligt barn som älskar att läsa allt han kan om Faraday och spelar på trummor kommer du att säga så vad, stor grej.

Aristo, fastän, är ett program för artificiell intelligens och forskare skulle vilja att världen skulle veta att detta är en stor sak, som "ett riktmärke för AI -utveckling, "som Melissa Locker kallade det Snabbt företag .

Vi menar, Tänk på det. Cade Metz, i The New York Times , har tänkt på det. "Fyra år sedan, mer än 700 datavetenskapare tävlade i en tävling för att bygga artificiell intelligens som kunde klara ett åttonde klassens vetenskapstest. Det fanns $ 80, 000 i prispengar på linjen. De flunkade alla. Även det mest sofistikerade systemet kunde inte göra bättre än 60% på testet. AI kunde inte matcha de språk- och logikfärdigheter som elever förväntas ha när de kommer in på gymnasiet. "

Så vem ligger bakom testet som 2019 äntligen imponerade? Inte en dålig gissning:Allen Institute for Artificial Intelligence, som övervakas av Oren Etzioni. Deras system hade rätt svar på mer än 90 procent av frågorna på testet, och det stannar inte där-systemet fick över 80 procent av de rätta svaren på flervalsfrågor som inte är diagram i en naturvetenskapsprov från 12:e klass.

Vi tittar nu på "betydande framsteg i utvecklingen av AI som kan förstå språk och efterlikna människors logik och beslutsfattande, "sa Metz.

För den direkta historien, du bör läsa "Från 'F' till 'A' på N.Y. Regents Science Exam:An Overview of the Aristo Project, "som nu finns på arXiv. Det här projektet var ett sexårigt uppdrag att besvara naturvetenskapsprov i grundskolan och gymnasiet.

Författarna var väl medvetna om att AI inte tidigare hade gjort en imponerande show för att prestera på önskade nivåer. Med all AI:s behärskning på Go, Poker och fara, de sa, "Det stora utbudet av standardiserade tentor har varit en viktig utmaning. Även 2016 det bästa AI -systemet uppnådde bara 59,3% på en 8:e klassutmaning i naturvetenskap. "

AI tog flervalsprov; 90 procent-talet fanns på tentamens icke-diagram, flervalsfrågor.

Här är hur AI2 beskriver dess icke-mänskliga sus:"Aristo sammanför maskinläsning och NLP, textuell förankring och slutsats, resonerar med osäkerhet, statistiska tekniker över stora företag, och diagramförståelse för att utveckla den första "kunniga maskinen" om vetenskap. "

Teamet skämde bort Aristo för ett baktank, mindre att göra med att klappa sig själva på ryggen och mer om vad de kan lära sig av Aristos beteenden vid naturvetenskapliga prov, "eftersom dessa frågor testar många av de nyckelfärdigheter som krävs för maskinintelligens, sa de.

I deras papper, de förklarade mer om goda skäl att utnyttja standardiserade vetenskapsprov.

"Standardiserade tester, särskilt vetenskapsprov, är ett sällsynt exempel på en utmaning som uppfyller dessa krav. Även om det inte är ett fullständigt test av maskinintelligens, de utforskar flera funktioner som starkt förknippas med intelligens, inklusive språkförståelse, resonemang, och användning av sunt förnuft. En av de mest intressanta och tilltalande aspekterna av vetenskapsprov är deras examinerade och mångfacetterade karaktär; olika frågor utforskar olika typer av kunskap, varierar kraftigt i svårigheter. Av denna anledning, de har använts som en övertygande - och utmanande - uppgift för fältet i många år. "

Nya skryt:Aristo, författarna sa, är det första systemet som uppnår en poäng på över 90 procent på icke-diagrammet, flervalsdel av New York Regents 8:e klass Science Exam.

Stephen Johnson in Stort tänk skrev om Aristos oförmåga att göra diagram. Han sa "systemet är endast utformat för att tolka språk, vilket betyder att den kan svara på flervalsfrågor, men inte de som har en illustration eller graf. "

Ändå, prestanda visade att "moderna NLP -metoder kan resultera i behärskning av denna uppgift."

För institutet, Aristos bedrift tas inte som en abborre på berget utan snarare ett steg i önskad riktning. De kallar det en milstolpe "på den långa vägen mot en maskin som har en djup förståelse för vetenskap och uppnår Paul Allens ursprungliga dröm om en digital aristoteles."

© 2019 Science X Network