RaLLe

rᴀllᴇ

RᴀLLᴇ是用于开发和评估检索型大型语言模型（R-LLLMS）的可访问框架。
本视频中介绍了GUI上RᴀLLᴇ的主要用途的概述。

RᴀLLᴇ是在Kioxia Corporation的记忆技术研究与开发研究所开发的。

关键功能

• 易于开发和测试：用户可以在图形接口中轻松选择，组合和测试各种猎犬和LLM，包括开源模型。
• R-llms的客观评估：RᴀLLᴇ提供了可再现的实验，该实验具有客观的基准/指标，从而实现了R-LLLM性能的客观评估。
• 透明的提示工程：用户可以看到所有输入（提示）和LLM的输出，从而可以轻松探索和优化提示。

用法

入门：

• 安装说明：install.md。
• 文档索引：此处。
• 使用自定义数据集：此处。

使用rᴀllᴇ：

• GUI指南：在这里。
• 使用Python脚本进行评估：此处。
• 用MLFlow回顾评估结果：此处

注意：可以通过GUI和使用脚本进行评估实验。

参考

新闻：我们的论文已被EMNLP 2023系统演示所接受。

引用何时在研究论文中使用rᴀllᴇ时引用：

 @misc { ralle ,
      title = { RaLLe: A Framework for Developing and Evaluating Retrieval-Augmented Large Language Models } , 
      author = { Yasuto Hoshi and Daisuke Miyashita and Youyang Ng and Kento Tatsuno and Yasuhiro Morioka and Osamu Torii and Jun Deguchi } ,
      url = { https://arxiv.org/abs/2308.10633 } ,
      year = { 2023 } ,
      eprint = { 2308.10633 } ,
      publisher = { arXiv }
}

执照

rᴀllᴇ已获得MIT许可，请参阅许可证文件以获取更多详细信息。