A gótól a mágnesesrezonancia-képalkotásig (MRI), mesterséges intelligenciák gyakran diadalmaskodnak a terület humán szaktekintélyei felett. Merészebbek hajlamosak a Szingularitás rövid időn belüli eljövetelére következtetni, de a látványos győzelmek után minimum azt hinnénk, hogy az okos gépek könnyen elboldogulnak középiskolás matematikai feladványokkal.

Tévednénk, mert napjaink talán legismertebb MI-je, a Google által pár éve felvásárolt londoni Deep Mind rendszere elhasalt egy 16 éves brit diákok szintjének megfelelő matematikateszten, a megszerezhető 40 pontból mindössze 14-et gyűjtött össze.

Az ember több kognitív képességét használja egyszerű matematikai behelyettesítési kérdések megoldásához, komoly elmekapacitást mozgatunk meg hozzájuk.

Egyrészt a karaktereket entitásokra (számokra, aritmetikai operátorokra, változókra és szavakra) bontjuk, szavakat egyenletekké alakítunk. Másrészt tervezünk, például pontos sorrendben azonosítjuk a változókat. Harmadrészt összeadunk, szorzunk stb. függvények felállításához. Negyedrészt munkamemóriánkban matematikai értékeket tárolunk, összességében pedig korábbi ismereteinket alkalmazzuk.

A DeepMind neurális modelljét különböző típusú matematikai problémákat tartalmazó adatsoron tesztelték. Az adatsort közösségi ötletbörze (crowdsourcing) helyett inkább úgy állították össze, hogy több gyakorlópélda legyen, ellenőrizhető nehézségi szinttel, és csökkenjen a tanulási idő.

Az adatok a brit középiskolai matematika-tanmeneten alapulnak, és a tantárgy több területét (algebra, mértan, számolás, mérés, valószínűségek stb.) lefedik.

A kutatók végül többféle mesterségesintelligencia-modellt teszteltek, és az algoritmusoknak meggyűlt a bajuk a szövegben megjelenő kérdés lefordításával, csomó szó, jel és függvény értelmezésével, tényleges műveletekkel történő megoldásával.

Egyik sem teljesített jól, így jött ki a megnyugtatónak egyáltalán nem nevezhető 14/40.

A szám azért nyugtalanító, mert az MI-ket eleve úgy tervezik, hogy adatokra összpontosítsanak, mintázatokat keressenek köztük, elemezzék őket, azaz sokféle matematikai műveletet kell kivitelezniük.