Oossa

llama.cpp b12099, Hexagon Lightning Indexer 지원 추가

이번 릴리스는 Hexagon 하드웨어에서 Lightning Indexer 연산을 초기 지원하며, 프리필과 디코드를 위한 HMX 경로를 포함합니다.

짧은 소식작성: Oossa 게시일: 1 분 읽기

llama.cpp 프로젝트의 b12099 릴리스는 Hexagon 하드웨어에서 Lightning Indexer 연산을 초기 지원합니다. 프리필과 디코드를 위한 HMX 가속 경로와 함께 q8_0 디코드 게더링, q4_0 입력도 지원합니다. 릴리스 페이지에는 CPU, Adreno GPU, Hexagon NPU를 사용하는 Snapdragon 기기용 Linux 및 Android 빌드가 나와 있으며, 설정 가이드 링크도 포함돼 있습니다.

왜 중요한가

Snapdragon 기기에서 llama.cpp를 사용하는 개발자는 새 Hexagon 경로를 시험해 볼 수 있습니다. 다만 릴리스 노트에는 성능 수치나 모델 호환성에 관한 정보가 없습니다.

이 기사가 도움이 되었나요?
공유

다음 읽을거리

Oossa · 뉴스레터

이번 주 AI, 쉽게 정리

매주 월요일, 알아둘 만한 소식을 쉬운 말로. 무료, 스팸 없음.