Oossa

llama.cpp b11555 출시…CPU 오류 수정·새 바이너리 제공

오픈소스 Llama 추론 라이브러리 llama.cpp가 b11555로 업데이트됐다. F16C를 지원하는데도 사용하지 않던 AVX2 CPU 문제를 수정하고, macOS·iOS·Linux용 새 빌드를 공개했다.

짧은 소식작성: Oossa 게시일: 1 분 읽기

ggml‑org가 llama.cpp 버전 b11555를 출시했다. 이번 업데이트에서는 F16C 명령어 세트를 지원하는 AVX2 CPU에서도 이를 사용하지 않던 버그를 수정했다. macOS Apple Silicon과 macOS Intel, iOS용 바이너리 패키지와 Vulkan 및 CUDA 12.8을 지원하는 구성을 포함한 여러 Ubuntu용 패키지도 새로 제공한다.

왜 중요한가

호환되는 CPU에서 Llama 모델을 실행하는 개발자는 수동으로 패치를 적용하지 않아도 추론 속도를 높일 수 있다.

이 기사가 도움이 되었나요?
공유

다음 읽을거리

Oossa · 뉴스레터

이번 주 AI, 쉽게 정리

매주 월요일, 알아둘 만한 소식을 쉬운 말로. 무료, 스팸 없음.