Oossa

llama.cpp b11531, 새 바이너리 추가하고 API 개편

오픈소스 LLM 런타임의 새 버전은 macOS·iOS·Linux 빌드와 채팅 API 개편을 제공한다.

짧은 소식작성: Oossa 게시일: 1 분 읽기

ggml‑org 팀이 llama.cpp 릴리스 b11531을 공개했다. 이번 버전은 채팅 API를 개편하고 macOS(Apple Silicon 및 Intel), iOS, CPU·Vulkan·CUDA 12.8을 포함한 여러 Ubuntu 변형용 사전 빌드 바이너리를 제공한다. 다운로드 링크는 GitHub 릴리스 페이지에서 확인할 수 있다. 이제 사용자는 직접 컴파일하지 않고도 더 많은 플랫폼에서 LLM을 로컬로 실행할 수 있다.

왜 중요한가

개발자는 이제 더 많은 기기에서 빌드 과정을 거치지 않고 Llama 모델을 로컬로 실행할 수 있으며, Ubuntu에서 GPU 가속도 활용할 수 있다.

이 기사가 도움이 되었나요?
공유

다음 읽을거리

Oossa · 뉴스레터

이번 주 AI, 쉽게 정리

매주 월요일, 알아둘 만한 소식을 쉬운 말로. 무료, 스팸 없음.