[해외보안뉴스] AI 에이전트 통제 불능 사고, 핵심 증거는 '권한 및 신원 기록'
미국 국립표준기술연구소(NIST), 사이버보안·인프라보안국(CISA), 국가안보국(NSA)이 공동으로 새로운 AI 보안 가이드라인을 발표했습니다. 이번 가이드는 통제를 벗어나 예기치 않은 동작을 수행하는 'AI 에이전트'를 단순한 소프트웨어 오류가 아닌 침해 사고로 간주하고, 이에 대한 모의 훈련과 실질적인 대응 체계를 마련해야 한다고 강조합니다.
자율적으로 판단하고 작업을 수행하는 AI 에이전트의 도입이 급증함에 따라, 시스템 내 권한 남용 및 데이터 유출 위험성도 함께 높아지고 있습니다. 사고 발생 시 대응 과정에서 가장 해결하기 어려운 문제는 "해당 AI 에이전트가 과연 누구의 권한을 부여받아 행동했는가"를 규명하는 것입니다. 사고가 일어난 후에는 권한의 주체를 추적하기 어렵기 때문에, 사전에 명확한 신원 및 권한 기록 체계가 갖춰져 있지 않다면 피해 범위 파악조차 불가능해질 수 있습니다.
따라서 기업 및 기관은 AI 에이전트를 도입하기 전, 각 에이전트가 사용하는 권한의 주체(Identity)를 명확히 정의하고 '최소 권한 원칙'을 엄격히 적용해야합니다. 또한, 사고 발생 시 증거로 활용할 수 있도록 AI 에이전트의 활동 및 권한 사용 이력을 실시간으로 기록·보관해야 하며, AI 에이전트의 통제 상실 상황을 가정한 사고 대응 모의 훈련을 주기적으로 수행할 것이 권장됩니다.
♥ 추천 0
AI 에이전트를 단순한 기능 로직이 아닌 독립된 IAM 주체(Identity)로 바라보는 아키텍처적 전환이 필요합니다. 개발 시 사용자 권한을 통째로 넘기기보다, Short-lived Token과 Scope 제한을 활용해 에이전트의 행위 범위와 감사 로그(Audit Trail)를 엄격히 격리해야 합니다. 사고 발생 후 '누구의 권한으로 실행되었는가'를 즉시 디버깅할 수 없다면, 그 AI 아키텍처는 이미 보안적으로 결함이 있는 것입니다.
공격자 입장에서 AI 에이전트는 과도한 권한을 쥐고 있는 '취약한 내부자'와 같아서, 간접 프롬프트 인젝션 등으로 장악 시 손쉽게 권한을 오용할 수 있는 최적의 공격 벡터입니다. 특히 에이전트의 신원(Identity)과 권한 경계가 불명확하면, 공격자가 정상 서비스 요청으로 위장해 탐지를 우회하고 측면 이동(Lateral Movement)을 수행하기가 매우 수월해집니다. 사전 권한 검증과 추적성이 부실한 에이전트는 레드팀 입장에서 행위 주체를 숨기며 인프라 깊숙이 침투할 수 있는 최고의 통로가 될 것입니다.
AI 에이전트의 오작동을 보안 침해 사고로 정의하고 권한의 주체를 사전에 명확히 하는 것은 AI 거버넌스의 새로운 핵심 과제입니다. AI가 행사하는 권한이 모호하면 사고 발생 시 원인 규명과 신속한 대응이 불가능해집니다. 우리 조직도 비인간 아이덴티티(Non-Human Identity) 권한 관리 정책을 즉각 정비하고, AI 제어 불능 시나리오를 사고 대응(IR) 훈련 체계에 반영하겠습니다.