editoy logo

활성화 캡핑 (Activation Capping)

인공지능의 특정 신경 세포 뭉치가 과도하게 활성화되어 조력자 범위를 벗어나려고 할 때, 이를 강제로 정상 범위 안에 머물도록 제한하는 기술임. 모델의 근본적인 지능은 손상시키지 않으면서도 성격이 변질되는 것만 선택적으로 막을 수 있는 효율적인 안전장치임

용례

"우리는 조력자 축을 따라 활성화 강도의 정상 범위를 식별하고, 활성화가 이 범위를 벗어나려 할 때마다 이를 제한하는 '활성화 캡핑'이라는 가벼운 개입 방식을 개발했습니다."