llm workbenchダウンロード-LLM llm workbenchソースコードのダウンロード

llm workbench

AI ソースコード

1.0.0

ダウンロード

このアイデアのV2については、https://neosheets.com（https://github.com/suhjohn/neosheets）を参照してください。

LLMワークベンチ

https://www.llmwb.com/

LLMS用のスーパーチャージされたワークベンチ。さまざまなモデルとプロバイダーからのプロンプトテンプレートをテストして、プレースホルダーを置き換えるための迅速な引数のデータセットを使用します。

スクリーンショット

問題

3つの異なるAIチャットボットを作成しました。その過程で、このアプリケーションでサポートされている機能のサブセットを驚くほど構築する必要がありました。また、プロンプトがどのように機能するかを確認するために、さまざまな引数のプロンプトをテストするためのノーコードプラットフォームを持ちたいと思っていました。

個人的には、魅力的な自動プロンプトライブラリーを見つけていません。さまざまなパラメーターで十分なバイブチェックを取得したいと思います。

私はまた、個人的には抽象化ライブラリを使用せず、それほど便利であるとは思いません。しかし、生犬のテストプロンプトを望んでいる人にとっては、ほとんどツールがないようです。

私は、Anthropicの最近のワークベンチプラットフォームに触発され、Openaiの遊び場からの良いステップアップのように思えました。

アプリケーションは、これらの特定のユーザーの問題を解決します。

args: Record<string, string>をプロンプトパラメーターとして使用する特定のLLMプロンプトの場合、さまざまなモデルパラメーターをテストできるようにしたいと思います。
特定のLLM Propmtについては、さまざまな迅速なパラメーター、多分幸せなケース、または私が見たことがあるケースを何とかしてテストしたいと思います。
特定のプロンプトパラメーターのセットについては、さまざまなLLMプロンプトをテストして、それらの出力でバイブチェックを実行したいと考えています。
（プロバイダーは、特にオープンソースモデルに対して特に異なるデフォルトパラメーターを持っているようです）私は彼らの行動を理解するために異なるプロバイダーと同じプロンプト +モデルをテストしたい
私が提供した特定のパラメーターのセットについて、複数の実行の履歴を見たいと思います。

特徴

「テンプレート」を作成します：mustache.jsを使用して変数を示すために{{ }}を使用するメッセージ / RAWプロンプト。
「データセット」の作成：テンプレートをテストする変数のリストを作成します。
すべてのパラメーターをサポートする：UIだけでなく、異なるAPIで使用可能なすべてのパラメーターを入力できるようにします。多くのセミプロフェッショナルプレイグラウンドツールは、ツールやLogit_Biasなどのパラメーターをサポートしていないことがわかりました。このプロジェクトは、プロバイダーによって追加されたときに新しいパラメーターを簡単に拡張できるように構築されています。
エコシステム内のすべての意味のあるプロバイダーをサポートします。