RaLLe

rᴀllᴇ

Rᴀllᴇは、検索された大規模な言語モデル（R-LLM）を開発および評価するためのアクセス可能なフレームワークです。
GUI上のrᴀllᴇの主要な使用の概要は、このビデオに記載されています。

Rᴀllᴇは、Kioxia Corporationのメモリテクノロジー研究開発研究所で開発されています。

重要な機能

• 簡単な開発とテスト：ユーザーは、グラフィカルインターフェイス内で、オープンソースモデルを含むさまざまなレトリーバーとLLMを簡単に選択、結合、テストできます。
• r-llmsの客観的評価：rᴀllᴇは、R-LLMパフォーマンスの客観的評価を可能にする客観的なベンチマーク/メトリックを備えた再現性のある実験を提供します。
• 透明プロンプトエンジニアリング：LLMのすべての入力（プロンプト）と出力がユーザーに表示され、プロンプトの簡単な調査と最適化が可能になります。

使用法

はじめる：

• インストール命令：install.md。
• ドキュメントインデックス：こちら。
• カスタムデータセットの使用：こちら。

rᴀllᴇを使用：

• GUIのガイド：こちら。
• Pythonスクリプトによる評価：こちら。
• MLFLOW：こちらで評価結果を確認してください

注：評価実験は、GUIとスクリプトの両方を使用して実行できます。

参照

ニュース：私たちの論文は、EMNLP 2023システムのデモンストレーションによって受け入れられています。

研究論文でrᴀllᴇを使用する場合の引用への参照：

 @misc { ralle ,
      title = { RaLLe: A Framework for Developing and Evaluating Retrieval-Augmented Large Language Models } , 
      author = { Yasuto Hoshi and Daisuke Miyashita and Youyang Ng and Kento Tatsuno and Yasuhiro Morioka and Osamu Torii and Jun Deguchi } ,
      url = { https://arxiv.org/abs/2308.10633 } ,
      year = { 2023 } ,
      eprint = { 2308.10633 } ,
      publisher = { arXiv }
}

ライセンス

rᴀllᴇはMITライセンスです。詳細については、ライセンスファイルを参照してください。