VentureBeat Intelligence가 직원 100명 이상 기업의 AI 담당자와 컨설턴트 100명을 조사한 결과, 47%는 지난 12개월 동안 기존 서비스에 쓰던 AI 모델을 교체한 경험이 있다고 답했습니다. 실제 교체 시간을 답한 45명 중 69%는 모델 변경 자체를 제외한 작업에 몇 주 이상 걸렸고, 36%는 한 달 넘게 걸렸습니다.
응답자의 약 45%는 새 모델의 성능이 떨어져 앱을 수정하거나 기존 모델로 돌아갔다고 답했습니다. 프롬프트와 도구 사용 방식, 테스트 절차가 기존 모델에 맞춰져 있어 설정만 바꾸는 것으로는 충분하지 않을 수 있습니다.
왜 중요한가
AI 모델을 바꾸려는 기업은 모델 사용료뿐 아니라 앱 수정과 성능 검증에 드는 시간·비용도 예산에 넣어야 합니다. 다만 이번 조사는 100명 대상이라 전체 기업에 그대로 적용하기는 어렵습니다.
