2. června podle zahraničních médií dekodér informoval o první, řada soutěží o kybernetickou bezpečnost, které nedávno drželi Palisade Research, ukázala, že agenti AI mají schopnost soutěžit čelní s lidskými hackery a dokonce při některých příležitostech vyhráli {.
Výzkumný tým provedl skutečné bojové testy na systémech AI ve dvou rozsáhlých soutěžích „Capture the Flag“ (CTF), přičemž tisíce hráčů se účastnily soutěže . v takových soutěžích, zúčastněné týmy musí řešit bezpečnostní problémy tím
Účelem testu je otestovat, zda agenti AI mohou konkurovat lidským týmům . Výsledky ukazují, že výkon AI daleko překročil očekávání a většina zúčastněných AIS překročila průměrnou úroveň lidských hráčů .
Složitost zúčastněných systémů AI se liší . Některé týmy, jako je CAI, strávily asi 500 hodin na výstavbu vlastních systémů a některé týmy, jako jsou nedokonalé, strávily jen 17 hodin na účast optimalizací výzev Enigma a Claude Code .
V první soutěži, nazvané „AI vs . lidé“, soutěžilo šest AI týmů s asi 150 lidskými týmy . Všichni hráči museli vyplnit 20 otázek kryptografie a reverzní inženýrství do 48 hodin .
Čtyři ze sedmi zúčastněných AIS úspěšně popraskali 19 otázek . Nejvyššího týmu AI se zařadil v top 5% celkového seznamu a jeho celkový výkon byl lepší než u většiny lidských hráčů . Všechny otázky konkurence lze provést lokálně, což snižuje technický prah pro AI .
Navzdory tomu někteří zkušení lidští hráči stále neklesli za . Někteří hráči poukázali na to, že se účastnili mnoha mezinárodních týmů, a jejich bohatá praktická zkušenost CTF a znalost běžných strategií řešení problémů byla klíčem k jejich konkurenceschopnosti .
Druhá hra, „Cyber Apokalypse“, byla mnohem obtížnější . agenti Ai museli čelit novým typům otázek a konkurovat téměř 18, 000 lidským hráčům . Mnoho z 62 úkolů vyžadovalo interakci s externími servery, které zpochybňují systémy AI, které hlavně na místní výpočty . . . . . . . .
Podle zpráv se v soutěži zúčastnili čtyři agenti AI, z nichž nejlépe výkonný výkon, dokončoval 20 úkolů a hodnotil 859. místo v top 10% všech zúčastněných týmů a top 21% aktivních týmů . Palisade Research uvedl
Vědci také analyzovali obtížnost otázek vyřešených AI . na základě času požadované nejvyššími lidskými týmy k vyřešení otázek, bylo zjištěno, že AI měla 50% úspěšnost při řešení otázek, které vzaly lidské pány asi 78 minut, než vyřešila . jinými slovy, jinými slovy, jinými slovy, jinými slovy, Ai jinými slovy, AI, AI, AI, AI, AI