csghub serverダウンロードcsghub serverソースコードのダウンロード

csghub server

その他のソースコード

v1.1.0

ダウンロード

英語∙∙∙日本語

CSGHub Server 、オープンソースの一部であり、信頼できる大規模モデルアセット管理プラットフォーム-CSGHUBです。モデルの管理に焦点を当てています、データセットおよびその他のLLM資産を介してapiを通して

主な機能：

ユーザーの作成と管理
モデルおよびデータセットラベルの自動タグ付け
ユーザー、組織、モデル、データを検索します
.parquetファイルなどのデータセットファイルのオンラインプレビュー
テキストと画像の両方のコンテンツモデレート
LFSファイルを含む個々のファイルのダウンロード
ダウンロードや好きなボリュームなどのモデルおよびデータセットアクティビティデータの追跡

デモ

ユーザーがCSGHUBの機能と使用を迅速に理解できるようにするために、デモビデオを録音しました。このビデオを視聴して、このプログラムの主な機能と操作手順を迅速に理解できます。

csghubデモビデオは吹き飛ばされています。YouTubeまたはbilibiliでもチェックすることができます
csghub-demo-1080p.mp4

強力な管理機能を体験するには、OpenCSG Webサイトにアクセスしてください。

クイックスタート

システムリソース要件：4C CPU/8GBメモリ

自分でDockerをインストールしてください。このプロジェクトは、Ubuntu22環境でテストされています。

Docker-Composeを使用して、ローカライズされたCSGHub Serverサービスをすばやく展開できます。

 # The API token should be at least 128 characters long, and HTTP requests to csghub-server require the API token to be sent as a Bearer token for authentication.
export STARHUB_SERVER_API_TOKEN= < API token >
mkdir -m 777 gitea minio_data
curl -L https://raw.githubusercontent.com/OpenCSGs/csghub-server/main/docker-compose.yml -o docker-compose.yml
docker-compose -f docker-compose.yml up -d

CSGHUBサーバーサービスをローカルに開始します

CSGHUBは、構成ファイルのTOML形式をサポートしています。コマンドラインからサービスを開始するとき、 --configオプションを使用して構成ファイルを指定できます。

 go run cmd/csghub-server/main.go start server --config local.toml
go run cmd/csghub-server/main.go deploy runner --config local.toml
...

configファイルのサンプルを提供し、名前を変更し、必要に応じて変更して使用できます。利用可能なすべての構成は、このGOファイルで定義されています。 TOML構成では、snake_caseネーミングコンベンションを使用し、名前が対応するstructフィールド名に自動的にマッピングされます。

技術アーキテクチャ

拡張可能でカスタマイズ可能

Gitea、Gitlabなど、さまざまなGitサーバーをサポートします。
LFSストレージシステムの柔軟な構成をサポートし、S3プロトコルと互換性のあるローカルまたはサードパーティのクラウドストレージサービスを使用することを選択できます。
コンテンツモデレートをオンデマンドで有効にし、サードパーティのコンテンツモデレートサービスを選択します。