llama.cpp 프로젝트의 b12099 릴리스는 Hexagon 하드웨어에서 Lightning Indexer 연산을 초기 지원합니다. 프리필과 디코드를 위한 HMX 가속 경로와 함께 q8_0 디코드 게더링, q4_0 입력도 지원합니다. 릴리스 페이지에는 CPU, Adreno GPU, Hexagon NPU를 사용하는 Snapdragon 기기용 Linux 및 Android 빌드가 나와 있으며, 설정 가이드 링크도 포함돼 있습니다.
왜 중요한가
Snapdragon 기기에서 llama.cpp를 사용하는 개발자는 새 Hexagon 경로를 시험해 볼 수 있습니다. 다만 릴리스 노트에는 성능 수치나 모델 호환성에 관한 정보가 없습니다.