Oossa

llama.cpp b11782, 토큰 수 계산 오류 수정

오픈소스 LLM 실행 도구가 여러 출력을 생성할 때 완료 토큰 수를 정확히 계산하도록 서버 코드를 개선하고, macOS·iOS·Linux용 새 바이너리를 추가했다.

짧은 소식작성: Oossa 게시일: 1 분 읽기

ggml‑org가 21 Oct 2026에 llama.cpp 버전 b11782를 출시했다. 이번 업데이트는 n > 1일 때 usage.completion_tokens를 실제보다 적게 계산하던 서버 문제를 수정해, 배치 생성에서 토큰 사용량 통계가 낮게 집계되던 오류를 해결했다. 또한 Apple Silicon, Intel Mac, iOS와 여러 Ubuntu 빌드(CPU, Vulkan, CUDA)용 새 사전 빌드 바이너리를 제공한다.

왜 중요한가

개발자는 토큰 사용량을 정확히 확인해 여러 응답을 생성할 때 비용과 성능을 모니터링할 수 있다.

이 기사가 도움이 되었나요?
공유

다음 읽을거리

Oossa · 뉴스레터

이번 주 AI, 쉽게 정리

매주 월요일, 알아둘 만한 소식을 쉬운 말로. 무료, 스팸 없음.