開發生態
Llama.cpp 釋出 0.2.0 版本,同步提供 b10566 預先編譯檔案
Reddit r/LocalLLaMA單一來源
尚未逐項核實
目前依單一來源整理,這是來源數量描述,不是對消息真假的判定。
據 Reddit 社群消息,Llama.cpp 已釋出 0.2.0 版本。官方 GitHub 頁面已提供 v0.2.0 標籤的更新日誌與原始碼,並同步釋出 b10566 預先編譯(pre-build)版本供使用者下載。
讀原始報導背景
llama.cpp 是一個以 C/C++ 撰寫的開源高效能推論引擎,專為執行 Llama 及相容的大型語言模型而設計。它建構於 GGML 張量函式庫之上,支援 CPU 與 GPU 混合推論,能處理超出顯示記憶體(VRAM)容量的模型。目前它已被廣泛視為幾乎所有本機端推論工具的核心標準。
這則事件的發展
來源
本期分類
相關主題