ggml-org 팀이 2026년 10월 17일 llama.cpp 버전 b11713을 공개했다. 이번 업데이트는 더 빠른 MMVQ 알고리즘을 적용해 저비트 데이터 형식의 CUDA 성능을 개선한다. Q3_K 및 Q6_K 양자화에서 HIP(AMD) GPU를 위한 소규모 수정도 포함됐다. macOS, iOS와 여러 Ubuntu 대상(CPU, Vulkan, CUDA)의 사전 빌드 바이너리를 이제 다운로드할 수 있다.
왜 중요한가
개발자는 NVIDIA GPU에서 양자화된 LLM을 더 빠르게 실행해 로컬 AI 애플리케이션의 추론 비용을 줄일 수 있다.