ggml-org 팀은 2026년 10월 20일 llama.cpp 버전 b11759를 출시했습니다. 이번 업데이트에서는 ggml-zdnn 백엔드에 flash attention 연산(fattn)을 추가하고, 스크래치 슬롯을 스크래치 버퍼 풀로 대체했습니다. 이 변경 사항은 기여자 Aaron Teo가 승인했습니다. Flash attention은 대규모 언어 모델이 사용하는 어텐션 계산을 빠르게 처리합니다.
왜 중요한가
Flash attention은 llama.cpp를 로컬에서 사용하는 경우 추론 시간을 줄여 채팅형 모델을 더 빠르게 사용할 수 있게 합니다.