Modela umetne inteligence podjetij OpenAI in Google DeepMind sta na letošnji Mednarodni matematični olimpijadi (IMO) dosegla zlate medalje, s čimer potrjujeta hitro napredovanje generativnih sistemov sklepanja. Obe podjetji sta rezultate predstavili v ločenih objavah, uvrstitev pa temelji na sposobnosti pravilnega reševanja matematičnih nalog, primerljivih z najuspešnejšimi srednješolci z vsega sveta.
Oba sistema sta v letošnji izvedbi sodelovala z uporabo pristopa, ki ne zahteva posrednega prevajanja matematičnih nalog v strojno berljivo obliko. Za razliko od lanskega pristopa Googla, ki je temeljil na t. i. formalnem sistemu, so tokrat uporabili modele, ki delujejo neposredno z naravnim jezikom in samostojno generirajo odgovore na osnovi dokazovanja.
Po podatkih podjetij so njihovi sistemi pravilno rešili pet od šestih nalog, kar predstavlja rezultat, ki ga doseže le majhen delež najboljših dijakov na olimpijadi. Ob tem poudarjajo, da so se modeli tokrat prvič izkazali v zahtevnejšem okolju, kjer naloge zahtevajo razumevanje kompleksnih matematičnih konceptov brez pomoči človeškega prevoda.
Po sobotni objavi OpenAI, v kateri je podjetje razglasilo, da je njihov model osvojil zlato medaljo, so se oglasili predstavniki konkurenčnega Google DeepMind, ki so izrazili pomisleke nad časovnico objave in ocenjevanjem rezultatov. Podjetje naj bi s tem prehitelo uradni čas razglasitve zmagovalcev IMO, ki je potekala v petek zvečer.
Vodja projekta IMO pri Googlu DeepMind Thang Luong je dejal, da je Google z objavo svojih rezultatov počakal do ponedeljka zjutraj, saj so želeli spoštovati postopke ocenjevanja in najprej pridobiti potrditev organizatorjev. “Organizatorji IMO imajo svoja navodila za ocenjevanje,” je dejal Luong in dodal: “Zato nobena ocena, ki ne temelji na teh smernicah, ne more trditi o ravni uspešnosti za zlato medaljo.”
Medtem pri OpenAI zatrjujejo, da so pred objavo rezultatov za oceno zaposlili zunanje strokovnjake, med katerimi so bili tudi nekdanji dobitniki medalj na IMO. Po njihovih besedah se je podjetje sicer obrnilo na organizatorje in prejelo priporočilo, naj z objavo počakajo do uradne razglasitve rezultatov, kar naj bi tudi storili.
Matematika kot referenca v svetu umetne inteligence
Mednarodna matematična olimpijada je eno najstarejših in najzahtevnejših srednješolskih tekmovanj na svetu, pogosto pa predstavlja tudi vir vrhunskih talentov na področju umetne inteligence. Zaradi tega imajo rezultati na takšnih tekmovanjih simbolno težo za podjetja, ki si prizadevajo za vodilno vlogo na hitro razvijajočem se trgu.
Nekateri raziskovalci poudarjajo, da trenutna razprava morda zakriva ključno ugotovitev – sposobnosti umetne inteligence na področju reševanja zahtevnih nalog se hitro približujejo človeški ravni, tudi na področjih, ki zahtevajo abstraktno mišljenje in kompleksno sklepanje. Čeprav se zdi, da je bila prednost posameznih podjetij v preteklosti bolj izrazita, je danes tekma precej bolj izenačena.
Kot poroča TechCrunch, se OpenAI pripravlja na objavo nove različice svojega modela, kar naj bi dodatno okrepilo položaj podjetja na trgu. Na drugi strani Google DeepMind nadaljuje s tesnim sodelovanjem z organizatorji tekmovanj in poudarja pomen formalnih postopkov preverjanja, kar naj bi zagotavljalo dodatno verodostojnost rezultatov.
Foto: Pixabay