B站开源了其轻量级AI语言模型Index-1.9B,引发业界广泛关注。该模型包含多个版本,旨在满足不同应用场景的需求,并提供了基准模型的对比研究。开源的举动方便开发者进行研究和应用,推动了AI领域的技术发展。Index-1.9B模型的推出,为开发者提供了更多选择,也为AI技术在更多领域的应用提供了可能。
B 站宣布开源了 Index-1.9B 模型,这一轻量级 AI 语言模型的推出引起了广泛关注。Index-1.9B 模型包含多个版本,其中包括基座模型、对照组和对话模型。1.9B包含:Index-1.9B base : 基座模型,具有19亿 非词嵌入参数量,在2.8T 中英文为主的语料上预训练,多个评测基准上与同级别模型比处于领先Index-1.9B pure : 基座模型的对照组,与base具有相同的参数和训练策略,不同之处在于严格过滤了该版本语料中所有指令相关的数据,以此来验证指令对benchmark的影响Index-1.9B chat : 基于index-1.9B base通过SFT和DPO对齐后的对话模型,由于预训练中引入了较多互联网社区语料,聊天的趣味性明显更强Index-1.9B character : 在SFT和DPO的基础上引入了RAG来实现fewshots角色扮演定制

Index-1.9B产品入口:https://top.aibase.com/tool/index-1-9b
Index-1.9B模型的开源,为AI技术的普及和应用提供了有力支持。其不同的版本也满足了不同用户的需求,例如对话模型更注重趣味性,角色扮演模型则更注重个性化定制。B站此举无疑为AI社区贡献了一份力量,值得期待后续的更新和发展。