Oossa

llama.cpp, Hexagon 가속 softplus 연산 추가

오픈소스 llama.cpp 라이브러리가 이제 Qualcomm Hexagon NPU에서 softplus 활성화 함수를 실행해, 지원되는 Android 기기의 성능을 높입니다.

짧은 소식작성: Oossa 게시일: 1 분 읽기

llama.cpp 프로젝트가 2026년 10월 17일 버전 b11703을 출시했습니다. 이번 버전에는 Qualcomm의 Hexagon NPU(HVX)에서 실행되는 벡터화 softplus 함수가 추가됐습니다. 새 헬퍼는 기존 Hexagon exp 및 log 연산을 사용하므로 CPU 버전과 수학적 계산은 동일합니다. 이 변경 사항은 Snapdragon CPU, Adreno GPU, Hexagon NPU를 지원하는 Android arm64 빌드에 포함됐습니다.

왜 중요한가

개발자는 Hexagon NPU가 탑재된 휴대전화에서 LLM 추론을 더 빠르게 실행할 수 있어, llama.cpp를 저전력 환경에서 활용할 수 있는 범위가 넓어집니다.

이 기사가 도움이 되었나요?
공유

다음 읽을거리

Oossa · 뉴스레터

이번 주 AI, 쉽게 정리

매주 월요일, 알아둘 만한 소식을 쉬운 말로. 무료, 스팸 없음.