RaLLe

rᴀllᴀ

rᴀllᴀ은 검색된 대형 언어 모델 (R-LLM)을 개발하고 평가하기위한 접근 가능한 프레임 워크입니다.
GUI에 대한 rᴀllᴇ의 주요 용도에 대한 개요 가이 비디오에 나와 있습니다.

RALLLᴀ은 Kioxia Corporation의 Memory Technology Research and Development에서 개발되었습니다.

주요 기능

• 쉬운 개발 및 테스트 : 사용자는 그래픽 인터페이스 내에서 오픈 소스 모델을 포함한 다양한 리트리버 및 LLM을 쉽게 선택, 결합 및 테스트 할 수 있습니다.
• R-LLM의 객관적인 평가 : rᴀllᴇ은 객관적인 벤치 마크/메트릭으로 재현 가능한 실험을 제공하여 R-LLM 성능의 객관적인 평가를 가능하게합니다.
• 투명한 프롬프트 엔지니어링 : LLM의 모든 입력 (프롬프트) 및 출력은 사용자에게 볼 수 있으므로 프롬프트를 쉽게 탐색하고 최적화 할 수 있습니다.

용법

시작하기 :

• 설치 명령 : install.md.
• 문서 색인화 : 여기.
• 사용자 정의 데이터 세트 사용 : 여기.

r usingll ᴇ 사용 :

• GUI 안내 : 여기.
• 파이썬 스크립트로 평가 : 여기.
• MLFLOW : 여기에서 평가 결과를 검토하십시오

참고 : GUI와 스크립트를 사용하여 평가 실험을 수행 할 수 있습니다.

참조

뉴스 : 우리의 논문은 EMNLP 2023 시스템 데모에 의해 받아 들여졌습니다.

연구 논문에서 rᴀllᴇ을 사용할 때 인용에 대한 참조 :

 @misc { ralle ,
      title = { RaLLe: A Framework for Developing and Evaluating Retrieval-Augmented Large Language Models } , 
      author = { Yasuto Hoshi and Daisuke Miyashita and Youyang Ng and Kento Tatsuno and Yasuhiro Morioka and Osamu Torii and Jun Deguchi } ,
      url = { https://arxiv.org/abs/2308.10633 } ,
      year = { 2023 } ,
      eprint = { 2308.10633 } ,
      publisher = { arXiv }
}

특허

rᴀllᴀ은 mit-licensed입니다. 자세한 내용은 라이센스 파일을 참조하십시오.