Unduh csghub server - Unduh Kode Sumber csghub server

csghub server

Kode sumber lainnya

v1.1.0

Unduh

Bahasa Inggris ∙ 简体中文 ∙ 日本語

CSGHub Server adalah bagian dari open source dan platform manajemen aset model besar yang andal - CSGHUB. Ini berfokus pada manajemen model 、 Dataset dan aset LLM lainnya melalui REST API。

Fitur Utama ：

Pembuatan dan manajemen pengguna dan orgnisasi
Penandaan label model dan dataset otomatis
Cari pengguna, organisasi, model, dan data
Pratinjau online file dataset, seperti file .parquet
Moderasi konten untuk teks dan gambar
Unduh file individual, termasuk file LFS
Pelacakan data aktivitas model dan dataset, seperti unduhan dan suka volume

Demo

Untuk membantu pengguna untuk dengan cepat memahami fitur dan penggunaan CSGHUB, kami telah merekam video demo. Anda dapat menonton video ini untuk mendapatkan pemahaman cepat tentang fitur utama dan prosedur operasi program ini.

Video demo CSGHUB adalah saat meledak, Anda juga dapat memeriksanya di YouTube atau Bilibili
csghub-demo-1080p.mp4

Silakan kunjungi situs web Opencsg untuk mengalami fitur manajemen yang kuat.

Awal yang cepat

Persyaratan Sumber Daya Sistem: Memori CPU/8GB 4C

Harap instal Docker sendiri. Proyek ini telah diuji di lingkungan Ubuntu22.

Anda dapat dengan cepat menggunakan layanan CSGHub Server yang terlokalisasi melalui komposisi Docker:

 # The API token should be at least 128 characters long, and HTTP requests to csghub-server require the API token to be sent as a Bearer token for authentication.
export STARHUB_SERVER_API_TOKEN= < API token >
mkdir -m 777 gitea minio_data
curl -L https://raw.githubusercontent.com/OpenCSGs/csghub-server/main/docker-compose.yml -o docker-compose.yml
docker-compose -f docker-compose.yml up -d

Mulai layanan server csghub secara lokal

CSGHUB mendukung format TOML untuk file konfigurasi. Saat memulai layanan apa pun dari baris perintah, Anda dapat menentukan file konfigurasi dengan opsi --config :

 go run cmd/csghub-server/main.go start server --config local.toml
go run cmd/csghub-server/main.go deploy runner --config local.toml
...

Kami memberikan contoh file konfigurasi, Anda dapat mengganti nama, memodifikasi sesuai kebutuhan dan digunakan. Semua konfigurasi yang tersedia didefinisikan dalam file Go ini. Konfigurasi TOML menggunakan konvensi penamaan snake_case, dan nama secara otomatis memetakan ke nama bidang struct yang sesuai.

Arsitektur Teknis

Dapat diperluas dan dapat disesuaikan

Mendukung server Git yang berbeda, seperti Gitea, Gitlab, dll.
Mendukung konfigurasi fleksibel dari sistem penyimpanan LFS, dan Anda dapat memilih untuk menggunakan layanan penyimpanan cloud lokal atau pihak ketiga yang kompatibel dengan protokol S3.
Aktifkan moderasi konten berdasarkan permintaan, dan pilih layanan moderasi konten pihak ketiga apa pun.

Peta jalan

Mendukung lebih banyak server git: Saat ini mendukung Gitea, dan berencana untuk mendukung repositori arus utama di masa depan.
GIT LFS: GIT LFS mendukung file besar, dan mendukung operasi perintah GIT dan unduhan online melalui Web UI.
Dataset Online Viewer: Pratinjau Set Data, Mendukung Pratinjau Pemuatan Top20/Topn dari set data format LFS.
Model/Dataset AutoTag: Mendukung metadata khusus dan ekstraksi otomatis tag model/dataset.
Dukungan Protokol S3: Mendukung Protokol Penyimpanan S3 (Minio), memberikan keandalan yang lebih tinggi dan efektivitas biaya penyimpanan.
Model Format Convert: Konversi format model utama.
Model Oneclick Deploy: Mendukung integrasi dengan Opencsg LLM-Inference, satu klik untuk memulai inferensi model.

Lisensi

Kami menggunakan lisensi Apache 2.0, yang kontennya dirinci dalam file LICENSE .

Berkontribusi

Jika Anda ingin berkontribusi, silakan ikuti pedoman kontribusi. Kami sangat senang dengan kontribusi Anda!

Ucapan Terima Kasih

Proyek ini didasarkan pada proyek open source seperti gin, duckdb, minio, dan gitea. Kami ingin mengucapkan terima kasih yang tulus kepada mereka atas kontribusi open source mereka!