Oossa

DwarfStar、大規模言語モデルをローカルで動かすds4を公開

Redisの開発者が、メモリを多く搭載したMacやGPUマシンでDeepSeek、GLM、Qwenのモデルを端末上で実行できるC言語製エンジン「ds4」を公開した。

短信著者: Oossa公開日: 1 分で読める

Redisの開発者であるAntirezは2026年10月2日、ds4を発表した。DeepSeek V4、GLM 5.x、Qwen 3.8などの最先端モデルを、メモリを多く搭載したMacやCUDAまたはROCm対応マシンで実行する、用途を絞ったC言語製の推論エンジンだ。非対称2ビット量子化を採用し、KVキャッシュをSSDにストリーミングできるため、長いプロンプトも再起動後に引き継げる。ds4にはCLI、ローカルHTTP API、ネイティブのコーディングエージェントが用意されており、いずれも同じモデル状態を共有する。

なぜ重要か

開発者はリモートAPIに頼らず、自分のハードウェアで高性能なLLMを実行できる。これにより、遅延やデータプライバシーへの懸念を抑えられる。

この記事は役に立ちましたか?
共有

次に読む

Oossa · ニュースレター

今週のAIを、わかりやすく

毎週月曜日、知っておきたいニュースをやさしい言葉で。無料・スパムなし。