2026. augusztus 6., csütörtök · Kutatás
Kutatók stressztesztje leplezi le a szerepjátékos AI-ügynökök gyengeségeit
Kutatók egy nem lektorált arXiv-tanulmányban egy háromügynökös rendszert mutatnak be, amely szerepjátékos nyelvi ágensek (RPLA) viselkedését teszteli hosszú, többfordulós párbeszédekben. Egy „kihallgató” ügynök hat egyre agresszívabb manipulációs stratégiát alkalmaz, egy célágens képviseli a tesztelt AI-t, egy pedig automatikusan pontozza a szerephűséget, az eltérést és az etikai következetességet. A szerzők állítása szerint három perszóna és három modellcsalád (Llama-3.3-70B, GPT-4o-mini, Claude-3.5-Haiku) tesztelésekor a többstratégiás támadás átlagosan 0,17-0,20 ponttal csökkentette a robusztussági pontszámokat, a hatóság-kihívás és az emocionális manipuláció bizonyult leghatékonyabbnak. Az automatikus értékelés a szerzők szerint erősen egyezett az emberi ítéletekkel, a platformot nyílt forráskódúként teszik közzé.
Miért fontos?
A módszer rávilágít, hogy magas kockázatú AI-ügynökök hosszabb interakciókban olyan hibákat mutathatnak, amelyeket a jelenlegi egyszerű tesztek nem tárnak fel.
Források
Említve a tudásbázisban
Kapcsolódó témák
Napi összefoglaló
Ez a hír a 2026. augusztus 6., csütörtök napi AI összefoglaló része.