오픈소스 Llama.cpp 라이브러리로 이제 여러 GPU에서 전문가 혼합(MoE) 모델을 실행할 수 있습니다.
짧은 소식작성: OossaOossa 게시일: 1 분 읽기
ggml‑org 팀은 2026년 10월 8일 llama.cpp 버전 b11507을 공개했습니다. 이번 업데이트에서는 여러 GPU에 분산할 수 있는 전문가 혼합(MoE) 캐시를 지원합니다. 덕분에 개발자는 모든 데이터를 GPU 한 장에 담지 않고도 더 큰 MoE 모델을 실행할 수 있습니다. 이번 릴리스에는 macOS와 iOS, CUDA 12.8 지원을 포함한 여러 Linux 구성용 새 바이너리 패키지도 포함됐습니다.
개발자는 이제 여러 GPU를 갖춘 시스템에서 더 크고 성능이 뛰어난 AI 모델을 실행할 수 있어, 개인용 하드웨어로 할 수 있는 일이 늘어납니다.
모델
Claude 기반 에이전트 3개로 구성된 새 검토 시스템이 핵심 주장 오류의 73.43%를 찾아냈다. 기존 최고 기록인 14.81%를 크게 웃도는 수치다.
모델
Mistral의 신규 1조 매개변수 모델은 독립 지수에서 38점을 기록했지만, 경쟁 오픈 모델보다 작업당 비용이 높다.
모델
OpenAI는 AI로 만든 콘텐츠를 실제 언론에 퍼뜨려 허위 보도를 심으려 한 영향력 공작 2건을 공개하고, 관련 계정을 차단했다.
Oossa · 뉴스레터
이번 주 AI, 쉽게 정리
매주 월요일, 알아둘 만한 소식을 쉬운 말로. 무료, 스팸 없음.
