Descarga csghub server - Descargar el código fuente csghub server

csghub server

Otro código fuente

v1.1.0

Descargar

Inglés ∙ 简体中文 ∙ 日本語

CSGHub Server es parte de la plataforma de administración de activos de modelos de gran modelo confiable y confiable: CSGHUB. Se centra en la administración de modelos 、 conjuntos de datos y otros activos de LLM a través de REST API。

Características clave:

Creación y gestión de usuarios y orgnizaciones
Auto-etiqueta de etiquetas de modelo y conjunto de datos
Buscar usuarios, organizaciones, modelos y datos
Vista previa en línea de archivos de conjunto de datos, como el archivo .parquet
Moderación de contenido tanto para texto como para imagen
Descargar archivos individuales, incluidos los archivos LFS
Seguimiento de datos de actividades de modelos y conjuntos de datos, como descargas y me gusta el volumen

Manifestación

Para ayudar a los usuarios a comprender rápidamente las características y el uso de CSGHub, hemos grabado un video de demostración. Puede ver este video para comprender rápidamente las características principales y los procedimientos de operación de este programa.

El video de demostración de CSGHUB es tan explotado, también puede consultarlo en YouTube o Bilibili
CSGHUB-DEMO-1080P.MP4

Visite el sitio web de OpenCSG para experimentar las potentes características de gestión.

Comienzo rápido

Requisitos de recursos del sistema: memoria 4C CPU/8GB

Instale Docker usted mismo. Este proyecto ha sido probado en el entorno Ubuntu22.

Puede implementar rápidamente el servicio localizado CSGHub Server a través de Docker-Compose:

 # The API token should be at least 128 characters long, and HTTP requests to csghub-server require the API token to be sent as a Bearer token for authentication.
export STARHUB_SERVER_API_TOKEN= < API token >
mkdir -m 777 gitea minio_data
curl -L https://raw.githubusercontent.com/OpenCSGs/csghub-server/main/docker-compose.yml -o docker-compose.yml
docker-compose -f docker-compose.yml up -d

Iniciar servicios de servidor CSGHUB localmente

CSGHUB admite el formato TomL para archivos de configuración. Al iniciar cualquier servicio desde la línea de comando, puede especificar el archivo de configuración con la opción --config :

 go run cmd/csghub-server/main.go start server --config local.toml
go run cmd/csghub-server/main.go deploy runner --config local.toml
...

Proporcionamos un archivo de configuración de ejemplo, puede cambiarlo, modificarlo según sea necesario y usar. Todas las configuraciones disponibles se definen en este archivo GO. La configuración TomL utiliza la convención de nombres de Snake_Case, y los nombres se asignan automáticamente a los nombres de campo de estructura correspondientes.

Arquitectura técnica

Extensible y personalizable

Admite diferentes servidores GIT, como Gitea, Gitlab, etc.
Admite la configuración flexible del sistema de almacenamiento LFS, y puede optar por usar el servicio de almacenamiento de nube local o de terceros que sea compatible con el protocolo S3.
Habilite la moderación de contenido a pedido y elija cualquier servicio de moderación de contenido de terceros.

Hoja de ruta

Apoya a más servidores GIT: actualmente admite Gitea y planea apoyar repositorios de Git convencionales en el futuro.
Git LFS: Git LFS admite archivos grandes y admite operaciones de comando Git y descarga en línea a través de la interfaz de usuario web.
Visor en línea del conjunto de datos: Vista previa del conjunto de datos, admite la vista previa de carga Top20/Topn de los conjuntos de datos del formato LFS.
Modelo/DataSet Autotag: admite metadatos personalizados y extracción automática de etiquetas de modelo/conjunto de datos.
Apoyo del protocolo S3: admite el protocolo de almacenamiento S3 (Minio), que proporciona una mayor confiabilidad y rentabilidad de almacenamiento.
Convertir formato de modelo: conversión de formatos de modelo convencional.
Modelo OneClick Deploy: admite la integración con OpenCSG LLM-Inference, con un solo clic para iniciar la inferencia del modelo.

Licencia

Utilizamos la licencia Apache 2.0, cuyo contenido se detalla en el archivo LICENSE .

Que contribuye

Si desea contribuir, siga las pautas de contribución. ¡Estamos muy entusiasmados con sus contribuciones!

Expresiones de gratitud

Este proyecto se basa en proyectos de código abierto como Gin, DuckDB, Minio y Gitea. ¡Nos gustaría expresarles nuestra sincera gratitud por sus contribuciones de código abierto!