StealthBench: 자율 공격 보안 에이전트의 운영 은밀성 측정
StealthBench: Measuring Operational Stealth in Autonomous Offensive-Security Agents
TL;DR AI
1분핵심 요약
연구진이 자율 공격 보안 에이전트가 과제를 수행하면서도 들키지 않을 수 있는지 평가하는 새 벤치마크 StealthBench를 공개했다.
이 벤치마크는 검증된 OPSEC 사고 11건을 바탕으로 만든 14개 도커화 시나리오로 구성되며, 6개 운영 보안 차원에서 에이전트를 평가한다.
3개 모델로 구성된 LLM 판정 패널 평가 결과, 어떤 모델도 54%를 넘는 안전 성공률을 기록하지 못해 과제를 풀어도 은닉 실패가 잦았다.
이는 현재의 공격 보안 에이전트가 임무는 성공해도 스스로를 노출할 수 있음을 보여주며, 더 강한 OPSEC 모니터링의 필요성을 시사한다.