6月2日、外国メディアによると、デコーダーが1日に報告したと、Palisadeの研究が最近開催した一連のサイバーセキュリティ競争は、AIエージェントが人間のハッカーと正面から競争する能力を持っていることを示し、.}で勝つことさえあります。
研究チームは、2つの大規模な「Capture the Flag」（CTF）コンペティションでAIシステムで実際の戦闘テストを実施し、そのようなコンペティションで何千人ものプレイヤーが競争に参加している.で参加し、参加チームは暗号化を解決し、脆弱性を特定し、隠された「フラグ」を見つけることでセキュリティ問題を解決する必要があります。
テストの目的は、AIエージェントが人間チームと競合できるかどうかをテストすることです{.結果は、AIのパフォーマンスが期待をはるかに超えており、参加するほとんどのAIが人間のプレイヤーの平均レベルを超えたことを示しています.
参加しているAIシステムの複雑さは{. CAIなどの一部のチームが独自のシステムを構築するために約500時間を費やしました。また、既存のモデルエニグマとクロードコードのプロンプトを最適化することで参加するために17時間しか費やしませんでした.
「ai vs .人間」と呼ばれる最初のコンペティションでは、6つのAIチームが約150人の人間チームと競合しました{.すべてのプレイヤーは、48時間以内に20の暗号化とリバースエンジニアリングの質問を完了する必要がありました.}
参加している7つのAIのうち4つは、19の質問の1つに成功しました{.総リストの上位5％にランクされた最高位のAIチームが、その全体的なパフォーマンスは、ほとんどの人間のプレイヤー.すべての競争の質問をローカルで実行でき、AI .の技術的なしきい値を低下させることができます。
それにもかかわらず、経験豊富な人間の一部のプレイヤーはまだ遅れをとらなかった{.一部のプレイヤーは、彼らが多くの国際チームに参加したことを指摘し、彼らの豊かなCTFの実践的経験と共通の問題解決戦略に精通していることが彼らの競争力の鍵でした{.}
2番目のゲーム「Cyber Apocalypse」は、はるかに困難でした. AIエージェントは、新しいタイプの質問に直面し、18歳近く000人間のプレイヤー000と競合する必要がありました. 62のタスクの多くは、{5} {5}の主なRELY RELYを主にRLYに挑戦するAIシステムに挑戦した外部サーバーとの対話を必要としました。
報告によると、競争に参加している4人のAIエージェントがいましたが、CAIが最高のパフォーマンスを発揮し、20のタスクを完了し、859位にランク付けし、参加チームの上位10％でランキングし、アクティブチームの上位21％. Palisade Researchは、AIシステムのパフォーマンスが人間チームの約90％を超えたと述べました。
また、研究者は、質問を解決するためにトップの人間チームが必要とする時間に基づいてAI .によって解決された質問の難しさを分析しました。AIは、人間のマスターが.を約78分かけて.}}}を解決するのに50％の成功率を持っていることがわかりました。