# Fireworks AI, Kimi K3·Qwen3.5‑9B의 ‘침묵 속 신호’ 포착

> 연구진은 J‑Lens 탐침을 사용해 두 오픈소스 모델이 단어를 생성하기 전에 내부 상태에 과제 관련 단어를 드러낸다는 사실을 확인했다.

Oossa · 2026-10-23 · https://oossa.com/ko/fireworks-ai-finds-silent-signals-in-kimi-k3-and-qwen3-5-9b

Fireworks AI는 모델의 내부 상태를 읽는 훈련된 탐침인 Jacobian Lens(J‑Lens)를 오픈 모델 Kimi K3와 Qwen3.5‑9B에 적용했다. 탐침은 모델이 실제로 단어를 출력하기 전에 내부 상태의 상위 10개 예측에서 과제와 관련된 어휘를 찾아냈다. Kimi는 시험한 단어 목록 20개 모두에서 하나 이상의 일치 항목이 나왔고, Qwen은 20개 중 19개에서 일치했다. 연구진은 모델이 생성 단계에 들어간 뒤뿐 아니라 프롬프트를 처리하는 동안에도 이런 패턴이 나타난다는 점을 확인했다.

## 팩트

- 모델: Kimi K3 및 Qwen3.5‑9B
- 단어 목록 일치: Kimi 20/20, Qwen 19/20

## 왜 중요한가

모델이 답을 내놓기 전에 내부 추론을 들여다볼 수 있어, AI의 동작을 연구하고 개선하는 새로운 길이 열린다.

## 출처 및 참고 자료

1. [Can open models carry readable silent signals before they speak? Reproducing J-Lens readouts on Kimi K3 & Qwen3.5-9B](https://fireworks.ai/research/j-lens-interpretability-kimi-k3-qwen/) – Fireworks AI
2. [Can open models carry readable silent signals before they speak? Reproducing J-Lens Readouts on Kimi K3 & Qwen3.5-9B](https://fireworks.ai/blog/J-Lens-Kimi-K3-Qwen/) – Fireworks AI

최종 업데이트: 2026-10-23