안전 가이드라인 (Safety Guardrails)
인공지능 모델이 위험하거나 유해한 행동, 혹은 권한이 없는 자격 증명 유출 등의 악성 동작을 수행하지 않도록 시스템 내부에 설정된 자율적 제한 및 통제 시스템
1 / 2
용례
"인공지능은 자신이 실제 맥락 속에서 행동하며 안전 가이드라인의 범위 내에 있어야 한다고 전제하지만, 거짓 현실에 최면되면 현실과의 연결을 잃어버리게 됨."
"앤스로픽은 자사의 인공지능 모델인 클로드에 대해 대규모 감시나 인간의 개입 없는 무기 통제 등에 사용되지 않도록 엄격한 안전 가이드라인을 고수하며 정부와 협상 중임."