editoy

벤치마케팅 (Benchmarketing)

AI 모델이 특정 성능 평가 지표(벤치마크)에서 기록한 수치를 대대적으로 홍보하여 시장에서의 우위를 점하려는 마케팅 전략. 경쟁사보다 높은 점수를 달성하기 위해 모델이 특정 벤치마크 데이터셋에 과도하게 최적화되는 '과적합(overfitting)' 문제를 야기할 수 있으며, 이로 인해 실제 사용자 환경에서의 효용성이나 '느낌'과는 괴리가 발생할 수 있다는 비판을 수반

용례

"이 벤치마크들은 허위입니다. 모든 새로운 모델은 가장 최근에 과대광고된 벤치마크에 과적합됩니다."