Kimi K3推出百萬上下文模型
Kimi K3 已正式上線,具備 2.8 兆參數、100 萬 token 上下文與原生多模態能力。Kimi Delta Attention 在百萬 token 上下文中可讓解碼速度最高提升 6.3 倍,Attention Residuals 則以不到 2% 的額外成本,將訓練效率提高約 25%。
X @Kimi_Moonshot
23 則值得知道的變化
Kimi K3 已正式上線,具備 2.8 兆參數、100 萬 token 上下文與原生多模態能力。Kimi Delta Attention 在百萬 token 上下文中可讓解碼速度最高提升 6.3 倍,Attention Residuals 則以不到 2% 的額外成本,將訓練效率提高約 25%。
Google Vids上線Gemini Omni與個人化身功能,可透過文字及參考圖片生成影片,並以自然語言逐步修改背景、光線與特效。使用者也能上傳自拍照與短音檔,建立外貌及聲音相似的數位化身代為說話。