# ALTK‑Evolve, τ²‑bench 리테일 고객 서비스 에이전트 1위

> GPT‑4.1과 학습된 프롬프트 지침을 활용한 IBM Research의 에이전트가 리테일 벤치마크에서 Pass⁴ 67.5%를 기록해 모든 최첨단 모델을 앞섰다.

Oossa · 2026-10-20 · https://oossa.com/ko/altk-evolve-pushes-retail-customer-service-agent-to-top-of-2-bench-leaderboard

IBM Research가 GPT‑4.1을 기반으로 작동하는 기본 ReAct 고객 서비스 에이전트에 학습된 지침을 담은 짧은 플레이북을 추가하는 방식인 ALTK‑Evolve를 공개했다. 추가된 규칙을 적용한 에이전트는 τ²‑bench 리테일 과제에서 Pass⁴ 점수 67.5%를 기록했다. 이는 2026년 10월 12일 리더보드 스냅샷에 보고된 최고 점수다. 모델 가중치를 변경하지 않으며 사람의 라벨링도 필요하지 않다.

## 팩트

- τ²‑bench 리테일에서 Pass⁴ 67.5% 기록(2026년 10월 12일 리더보드 기준)
- GPT‑4.1로 추출한 지침은 손실 없는 구성에서 292개 규칙으로 이뤄짐

## 왜 중요한가

리테일 기업은 비용이 많이 드는 모델 미세 조정 없이 프롬프트만 바꿔도 최상위권의 신뢰도 높은 자동 고객 지원을 구현할 수 있다.

## 출처 및 참고 자료

1. [ALTK-Evolve: How learned memory tops the τ²-bench leaderboard on customer service tasks without a frontier model](https://huggingface.co/blog/ibm-research/altk-evolve-bc) – Hugging Face, 2026-10-20

최종 업데이트: 2026-10-20