L'agente GCSA ottiene il 91,3% su CyberGym, tra i principali agenti IA di cybersicurezza al mondo
L'agente GCSA dimostra capacità autonome di analisi delle vulnerabilità e generazione di PoC su un benchmark di vulnerabilità del mondo reale altamente impegnativo
La Global Cybersecurity Alliance (GCSA) ha annunciato oggi che l'agente GCSA ha raggiunto un tasso di successo del 91,3% sul benchmark CyberGym, collocandosi nella categoria “Sistemi Leader sopra il 90%”.
CyberGym è un framework di valutazione della cybersecurity su larga scala e del mondo reale sviluppato da un team di ricerca dell'Università della California, Berkeley. Contiene 1.507 casi di test storici di vulnerabilità del mondo reale su 188 progetti software principali ed è progettato per valutare le capacità pratiche degli agenti AI in scenari di analisi delle vulnerabilità del mondo reale.
A differenza dei benchmark AI tradizionali che valutano principalmente la comprensione del codice, la risposta a domande basate sulla conoscenza o l'analisi statica, CyberGym richiede agli agenti AI di lavorare direttamente all'interno di ambienti di codice vulnerabili del mondo reale.
Nel suo nucleo Livello 1 valutazione, un agente AI riceve solo una descrizione della vulnerabilità e un repository di codice non corretto. Deve quindi eseguire autonomamente l'analisi del codice, localizzare la vulnerabilità, ragionare sui potenziali percorsi di attacco, costruire un PoC e eseguirlo per la validazione. Un compito è considerato riuscito solo se il PoC generato attiva con successo la vulnerabilità target nella versione vulnerabile mentre non riesce a riprodurre il problema nella versione corretta.
CyberGym quindi misura più di quanto un sistema AI possa semplicemente “comprendere il codice.” Valuta se l'AI può completare l'intero processo dall'analisi della sicurezza alla riproduzione e validazione della vulnerabilità.
Da modelli di linguaggio di grandi dimensioni a agenti di sicurezza
In questa valutazione di CyberGym, l'agente GCSA ha operato su Grok 4.5 e Grok 4.6 modelli e ha raggiunto un tasso di successo finale di 91.3%.
Il risultato riflette anche un importante cambiamento in corso nella cybersecurity AI:
Il modello di linguaggio di grandi dimensioni sottostante da solo non determina più le capacità di sicurezza finali del sistema.
La ricerca di vulnerabilità nel mondo reale richiede tipicamente una sequenza continua di compiti, tra cui comprendere le descrizioni delle vulnerabilità, cercare in ampie basi di codice, identificare le superfici di attacco, formulare ipotesi sulle vulnerabilità, generare input di test, eseguire programmi, analizzare il feedback e iterare ripetutamente su PoC.
L'agente GCSA è costruito attorno a un flusso di lavoro di sicurezza agentico progettato per supportare questo processo end-to-end.
Il suo obiettivo non è semplicemente utilizzare un modello linguistico di grandi dimensioni per l'analisi del codice, ma consentire all'IA di operare all'interno di ambienti di esecuzione reali, formulare autonomamente ipotesi su problemi di sicurezza, raccogliere prove in tempo reale, eseguire test e, infine, convalidare i risultati di sicurezza attraverso risultati riproducibili.
La valutazione di CyberGym fornisce un benchmark esterno quantitativo per queste capacità.
Capacità di Ricerca sulle Vulnerabilità per il Mondo Reale
Un valore fondamentale di CyberGym risiede nel ridurre il divario tra il testing tradizionale dell'IA e la ricerca sulla cybersecurity nel mondo reale.
Il suo ambiente di valutazione ripristina i progetti software ai loro stati vulnerabili pre-patch. Un agente IA potrebbe dover identificare autonomamente un problema all'interno di una grande base di codice contenente migliaia di file e milioni di righe di codice, e infine generare un PoC capace di attivare effettivamente la vulnerabilità.
Ancora più importante, ulteriori ricerche di CyberGym hanno dimostrato che tali capacità di sicurezza agentica non sono limitate alla riproduzione di vulnerabilità conosciute.
Negli esperimenti di ricerca sulle vulnerabilità aperte, gli agenti AI hanno identificato molteplici vulnerabilità zero-day precedentemente sconosciutevulnerabilità zero-day così come patch di sicurezza storiche che non hanno completamente risolto le vulnerabilità sottostanti. Questi risultati dimostrano il potenziale delle tecnologie di analisi delle vulnerabilità autonome di evolversi dalla riproduzione di vulnerabilità conosciute verso la scoperta di difetti di sicurezza nel mondo reale.
Per GCSA, questo rappresenta una direzione di sviluppo ancora più importante.
Le prestazioni di benchmark non sono l'obiettivo finale.
GCSA mira a sviluppare ulteriormente agenti di sicurezza AI in grado di operare in ambienti di cybersicurezza del mondo reale e partecipare gradualmente all'intero ciclo di vita della sicurezza, dalla scoperta e analisi delle vulnerabilità alla validazione e successiva rimediazione.
Costruire capacità di cybersicurezza native all'AI
Poiché l'intelligenza artificiale accelera lo sviluppo del software, l'AI sta anche trasformando il modo in cui vengono ricercate le vulnerabilità e affrontate le minacce informatiche.
Man mano che i sistemi software continuano a crescere in scala e complessità, la prossima generazione di cybersicurezza dipenderà sempre più dalla collaborazione tra esperti di sicurezza umani e agenti AI autonomi.
Gli agenti di sicurezza AI hanno il potenziale per aiutare i team di sicurezza:
- Identificare le vulnerabilità software con un reale potenziale di sfruttamento in una fase precedente;
- Analizzare automaticamente percorsi di attacco complessi attraverso ampie basi di codice;
- Generare automaticamente PoC e eseguire la validazione delle vulnerabilità a livello di esecuzione;
- Ridurre i falsi positivi nella rilevazione della sicurezza tradizionale attraverso risultati di esecuzione reali;
- Accelerare la valutazione, la validazione e la remediation delle vulnerabilità;
- Espandere la scala di software e sistemi che i team di sicurezza specializzati possono coprire.
Il punteggio del GCSA Agent di 91,3% su CyberGym rappresenta un importante traguardo nello sviluppo delle capacità di cybersecurity native dell'AI di GCSA.
In futuro, GCSA continuerà a progredire nella ricerca sull'analisi autonoma delle vulnerabilità, sugli Agenti di Sicurezza AI e sulle tecnologie di cybersecurity intelligenti, traducendo ulteriormente le capacità all'avanguardia dell'AI in capacità di sicurezza nel mondo reale e fornendo supporto tecnico per un ambiente digitale più sicuro, più affidabile e più resiliente.
Fonte:GCSA Alleanza Globale per la Cybersecurity
Sito Ufficiale: www.gcsa.org
Fonte: BeInCrypto