Fireworks AI는 모델의 내부 상태를 읽는 훈련된 탐침인 Jacobian Lens(J‑Lens)를 오픈 모델 Kimi K3와 Qwen3.5‑9B에 적용했다. 탐침은 모델이 실제로 단어를 출력하기 전에 내부 상태의 상위 10개 예측에서 과제와 관련된 어휘를 찾아냈다. Kimi는 시험한 단어 목록 20개 모두에서 하나 이상의 일치 항목이 나왔고, Qwen은 20개 중 19개에서 일치했다. 연구진은 모델이 생성 단계에 들어간 뒤뿐 아니라 프롬프트를 처리하는 동안에도 이런 패턴이 나타난다는 점을 확인했다.
왜 중요한가
모델이 답을 내놓기 전에 내부 추론을 들여다볼 수 있어, AI의 동작을 연구하고 개선하는 새로운 길이 열린다.