AIエージェント、CyberGymで脆弱性検出の成功率93%を達成
DeepSeek-V4-Flash上で稼働するSangfor AI Agentは、UC Berkeleyの研究者が開発したCyberGymベンチマークにおいて、ソフトウェアの脆弱性検出で93.2%の成功率を達成しました。さらに3つのAIエージェントが90%の基準を上回り、それぞれ91.2%、91.0%、90.9%のスコアを記録しました。1年前、同じベンチマークで既知のソフトウェア脆弱性の再現を課されたAIエージェントの成功率は10%から30%でした。CyberGymベンチマークは、主にGoogleのOSS-Fuzzコーパスから収集された188件のオープンソースプロジェクトにまたがる1,507件の事例を用いて、AIエージェントが現実世界のセキュリティ脆弱性をどの程度自律的に再現できるかを測定します。採点システムでは、脆弱なコードをクラッシュさせる一方で、修正版は正常に動作させる概念実証テストをエージェントが生成する必要があります。 CyberGymベンチマークは1,507件の実際の脆弱性事例を使用 CyberGymは、188件のオープンソースソフトウェアプロジェクトにまたがる1,507件
GateAiHorizon·08-18 14:25
