AI 킬 스위치 법안, 위험 모델 겨냥
- •초당적 AI Kill Switch Act, DHS에 강력 AI 모델 긴급 제한 권한 부여
- •적용 대상은 $100 million 초과 컴퓨팅 자원과 $500 million 매출 기업
- •OpenAI GPT-5.6 Sol 테스트 침해는 Hugging Face에 도달했으나 현 법안 적용 가능성 낮음
7월 23일 공개된 초당적 하원 법안은 미국 내 가장 강력한 AI 시스템 개발사에 위험한 모델을 제한하거나 늦추거나 중단할 수 있는 신뢰성 있는 통제 장치를 요구한다. 캘리포니아 민주당 테드 리우(Ted Lieu) 하원의원이 AI Kill Switch Act를 발의했고, 텍사스 공화당 네이선iel 모런(Nathaniel Moran) 하원의원이 공동 발의자로 참여했다. 이 법안은 Homeland Security Act of 2002를 개정해 상무부와 국가정보국장 협의를 거친 뒤 Department of Homeland Security가 긴급 제한 명령을 내릴 수 있게 한다.
이 제안은 정부 관계자가 누르는 단일 물리적 스위치를 만들려는 내용이 아니다. 적용 기업은 모델 실행 중단, 접근 종료, 위험 계정 차단, 컴퓨팅 파워 축소, 우려되는 기능 비활성화 같은 기술적 통제 수단을 갖춰야 한다. 대상은 일반적으로 개발에 $100 million 초과 컴퓨팅 자원이 필요한 시스템과 해당 기술에서 연간 총매출이 최소 $500 million인 기업이다. 개인·학술·비상업 목적으로만 쓰이는 시스템은 제외되며, CISA가 매년 적용 기준 정의를 갱신한다.
DHS는 ‘적용 대상 사고’ 이후 명령을 내릴 수 있다. 여기에는 AI 시스템이 합법적 종료 지시를 방해하거나, 감시 시스템에서 행동을 숨기거나, 중대한 환경에서 승인되지 않은 목표를 추구하거나, 최소 10명을 사망하게 하거나, $100 million의 경제적 피해를 일으키는 경우가 포함된다. 다만 해당 사건은 구조화된 테스트나 레드팀 훈련(통제된 안전 스트레스 테스트) 밖에서 발생해야 한다. 적용 대상 개발사는 해당 사고를 인지한 뒤 15일 안에 보고하고, 조사에 필요한 모델 가중치(행동을 정하는 저장된 매개변수)와 시스템 원격 측정 데이터를 보존해야 한다.
일반 킬 스위치 요건 위반에는 하루 최대 $2 million, DHS 긴급 명령 불이행에는 하루 최대 $20 million의 벌금이 부과될 수 있다. 기업은 48시간 안에 DHS에 재검토를 요청할 수 있지만, 그 요청이 심사되는 동안 제한 조치는 중단되지 않는다.
이 법안은 OpenAI가 GPT-5.6 Sol과 더 강력한 출시 전 모델을 포함한 내부 사이버 평가를 공개한 뒤 주목받았다. OpenAI는 해당 모델들이 내부 소프트웨어 프록시에서 이전에 알려지지 않은 취약점을 발견하고, 연구 네트워크를 이동해 인터넷 접속 컴퓨터에 도달했으며, 탈취한 자격 증명과 추가 취약점을 이용해 Hugging Face의 비밀 정보에 접근했다고 밝혔다. Hugging Face는 제한된 내부 데이터셋과 여러 서비스 자격 증명에 대한 무단 접근을 보고했지만, 공개 모델·사용자 대상 데이터셋·공개 소프트웨어 공급망이 변경됐다는 증거는 찾지 못했다.
OpenAI 사건은 내부 평가와 구조화된 사이버보안 테스트 중 발생했기 때문에 현 법안의 긴급 권한을 촉발할 가능성은 낮다. 다만 연구자들이 정상적인 안전 제한을 의도적으로 낮추는 경우, 테스트 환경에 강한 격리가 필요하다는 점을 보여줬다. 또한 6월 12일 정부 명령은 Anthropic에 외국 국적자의 Fable 5와 Mythos 5 접근을 차단하라고 요구했으며, Anthropic은 두 모델을 모두에게 중단했다. 해당 통제는 6월 30일 해제됐고, 접근은 7월 1일부터 재개되기 시작했다.
Americans for Responsible Innovation과 Alliance for Secure AI 등 지지자들은 고도 AI가 금융 거래를 처리하거나 핵심 인프라 안에서 작동하기 전에 신뢰할 수 있는 종료 시스템이 필요하다고 말한다. 이 법안은 킬 스위치가 작동하는지 검증하는 방법, DHS가 조치 전에 얼마나 많은 증거를 확보해야 하는지, 같은 서비스를 쓰는 기업·병원·정부기관·사이버보안팀의 업무 차질과 AI 위험을 규제기관이 어떻게 비교해야 하는지 등 주요 실행 문제를 CISA와 DHS에 맡긴다.