2026. október 16., péntek · Kutatás
GPT-6-Astra rutinszerű fizikai kutatási feladatok 98%-át oldotta meg
Egy nemzetközi kutatócsoport – köztük az ICTS, a Harvard, a KU Leuven és a Google DeepMind munkatársai, összesen 35 szerző – közzétette a TheoPhysEval nevű benchmarkot, amely 50, korábban nem publikált elméleti fizikai kutatási feladatot tartalmaz ellenőrizhető megoldással. A feladatok a szerzők szerint úgynevezett „turn-the-crank” jellegű, rutinszerű kutatómunkát modelleznek, amelyben ismert módszereket kell alkalmazni egy kissé módosított kérdésre, és amit jellemzően egy PhD-hallgató kap első lépésként, egy adott terület szakértője pedig nagyjából egy nap alatt megold. A tesztben az OpenAI Codex környezetében futó GPT-6-Astra 49 feladatot oldott meg helyesen, vagyis 98 százalékot ért el, átlagosan kevesebb mint 3 dollárért feladatonként, az egész benchmarkot pedig közel 116 dollárból futtatták végig. Az Anthropic Claude Code-ban futó Opus 5.5 92 százalékot, a Google Gemini 3.8 Flash pedig 68 százalékot ért el. A kutatók szerint a magas pontszámok ellenére hiányzik az AI-ból egyfajta tudományos „ízlésérzék”, ami megmagyarázhatja, miért nem vezettek még ezek az eredmények valódi fizikai áttörésekhez.
Egy forrás Ehhez a hírhez egy forráslink áll rendelkezésre.
Miért fontos?
A benchmark 11 fizikai alterületet fed le, és minden ügynököt kétféle módon is teszteltek – internetes kereséssel és anélkül is –, így a magas pontszám nem magyarázható pusztán a kereséssel.
Források
Kapcsolódó témák
Napi összefoglaló
Ez a hír a 2026. október 16., péntek napi AI összefoglaló része.