B站開源了其輕量級AI語言模式Index-1.9B,引發業界廣泛關注。該模型包含多個版本,旨在滿足不同應用場景的需求,並提供了基準模型的對比研究。開源的舉動方便開發者進行研究和應用,推動了AI領域的技術發展。 Index-1.9B模型的推出,為開發者提供了更多選擇,也為AI技術在更多領域的應用提供了可能。
B 站宣布開源了Index-1.9B 模型,這款輕量級AI 語言模型的推出引起了廣泛關注。 Index-1.9B 模型包含多個版本,其中包括基座模型、對照組和對話模型。 1.9B包含:Index-1.9B base : 基座模型,具有19億非詞嵌入參數量,在2.8T 中英文為主的語料上預訓練,多個評測基準上與同級別模型比處於領先Index- 1.9B pure :基座模型的對照組,與base具有相同的參數和訓練策略,不同之處在於嚴格過濾了該版本語料中所有指令相關的數據,以此來驗證指令對benchmark的影響Index-1.9B chat : 基於index-1.9B base透過SFT和DPO對齊後的對話模型,由於預訓練中引入了較多互聯網社區語料,聊天的趣味性明顯更強Index-1.9B character :在SFT和DPO的基礎上引入了RAG來實現fewshots角色扮演定制

Index-1.9B產品入口:https://top.aibase.com/tool/index-1-9b
Index-1.9B模型的開源,為AI技術的普及和應用提供了有力支持。其不同的版本也滿足了不同使用者的需求,例如對話模型更注重趣味性,角色扮演模型則更注重個人化自訂。 B站此舉無疑為AI社群貢獻了一份力量,值得期待後續的更新與發展。