RaLLe

rᴀllᴇ

RᴀLLᴇ是用於開發和評估檢索型大型語言模型（R-LLLMS）的可訪問框架。
本視頻中介紹了GUI上RᴀLLᴇ的主要用途的概述。

RᴀLLᴇ是在Kioxia Corporation的記憶技術研究與開發研究所開發的。

關鍵功能

• 易於開發和測試：用戶可以在圖形接口中輕鬆選擇，組合和測試各種獵犬和LLM，包括開源模型。
• R-llms的客觀評估：RᴀLLᴇ提供了可再現的實驗，該實驗具有客觀的基準/指標，從而實現了R-LLLM性能的客觀評估。
• 透明的提示工程：用戶可以看到所有輸入（提示）和LLM的輸出，從而可以輕鬆探索和優化提示。

用法

入門：

• 安裝說明：install.md。
• 文檔索引：此處。
• 使用自定義數據集：此處。

使用rᴀllᴇ：

• GUI指南：在這裡。
• 使用Python腳本進行評估：此處。
• 用MLFlow回顧評估結果：此處

注意：可以通過GUI和使用腳本進行評估實驗。

參考

新聞：我們的論文已被EMNLP 2023系統演示所接受。

引用何時在研究論文中使用rᴀllᴇ時引用：

 @misc { ralle ,
      title = { RaLLe: A Framework for Developing and Evaluating Retrieval-Augmented Large Language Models } , 
      author = { Yasuto Hoshi and Daisuke Miyashita and Youyang Ng and Kento Tatsuno and Yasuhiro Morioka and Osamu Torii and Jun Deguchi } ,
      url = { https://arxiv.org/abs/2308.10633 } ,
      year = { 2023 } ,
      eprint = { 2308.10633 } ,
      publisher = { arXiv }
}

執照

rᴀllᴇ已獲得MIT許可，請參閱許可證文件以獲取更多詳細信息。