Cybersocaval: Benchmark et destination de Crowdsstrike pour l'IA en cybersécurité
Crowdsstrike, en partenariat avec Meta, a présenté Cybersocaval, une suite de référence pour tester les performances des systèmes d'intelligence artificielle dans les opérations de sécurité. La plate-forme est née du cadre Cyberseceval de Meta et de la Crowdstrike Threat Intelligence, dans le but de fournir une référence solide et open source à Select et à la mise en œuvre de LLM dans le SOC.
Le défi des équipes de sécurité
Les experts en cybersécurité sont confrontés à un flux constant d'alarmes et de menaces en évolution constante. De nombreuses organisations sont toujours dans les premiers stades d'adoption de l'IA et, sans critères d'évaluation clairs, il devient difficile de comprendre quels systèmes offrent un véritable avantage concurrentiel. La nouvelle référence vise à combler ce vide, indiquant comment tester le « sous-stress » et dans des scénarios d'attaque réalistes.
Cybersoceval: tests sur des scénarios réels
La suite évalue les modèles LLM dans des activités critiques telles que la réponse aux accidents, l'analyse des logiciels malveillants et l'intelligence des menaces. Grâce à des simulations basées sur des techniques adverses vraiment observées, Cybersocaval permet aux équipes de mesurer l'efficacité de l'IA dans des situations opérationnelles concrètes, aidant à identifier les cas dans lesquels l'automatisation génère une valeur maximale.
« Dans Meta, nous nous engageons à faire les avantages des progrès open source et à maximiser – en particulier maintenant que les LLM deviennent des outils puissants pour les organisations de toutes tailles », a déclaré Vincent Gonguet, directeur du produit, Genai chez SuperIntelligence Labs dans Meta.
« Notre collaboration avec Crowdsstrike présente une nouvelle suite de référence open source pour évaluer les compétences des modèles LLM dans les scénarios de sécurité du monde réel … Nous pouvons travailler plus rapidement en tant qu'industrie, pour débloquer le potentiel de l'IA pour protéger contre les attaques avancées, y compris les menaces basées sur l'IA ».
« Lorsque deux dirigeants tels que Crowdstrike et Destination se réunissent, le résultat est bien plus qu'une collaboration: il s'agit de définir la direction de la cybersécurité pour l'ère de l'IA », a déclaré Daniel Bernard, directeur des affaires de Crowdsstrike.
« En combinant l'intelligence adverse de Crowdsstrike et le leadership dans la cybersécurité AI-Native, avec l'expérience dans la recherche sur la méta et le vaste ensemble de données, nous aidons les clients et la cybersécurité en tant que secteur pour adopter des systèmes d'IA en toute confiance ».
Disponibilité open source
La suite cybersocavale est disponible dans la communauté de la sécurité et de l'IA. La référence peut être téléchargée via le cadre Meta Cyberseceval, dans le but d'être développé par la communauté et de devenir un point de référence pour l'adoption de l'IA en cybersécurité.
Pour en savoir plus, téléchargez le papier
