llm round trip correctness

Koreksi perjalanan bulat untuk mengevaluasi generasi BPMN

Keterangan

Repositori ini menguji gagasan metode evaluasi proxy untuk teks model BPMN. Evaluasi proksi melibatkan pipa pulang-pergi, "teks ke bpmn ke teks" dan menghitung teks rata-rata untuk teks kesamaan tanpa adanya bpmn kebenaran dasar. Untuk menunjukkan apakah metode proxy efektif, pertama -tama kita harus menyelidiki bagaimana evaluasi BPMN ke BPMN yang ada dari modul model_evaluasi berkorelasi dengan metode teks proxy ke teks. Karya ini terinspirasi oleh publikasi ini pada teks ke kode bundar.

Persyaratan dan pengaturan

Persyaratannya ada dalam file pyproject.toml ini. Setelah mengkloning repositori, jalankan:

poetry install

Memulai

Untuk menjalankan pipa, gunakan perintah yang mirip dengan ini:

screen -d -m python genai_gpt_pipeline.py --model-path ./data/pet/ground_json --text-path ./data/pet/process_descriptions --example pet --direction t2t 

File CSV ditulis ke direktori hasil. Notebook Jupyter digunakan untuk memvisualisasikan hasilnya.

Masalah yang diketahui

Tidak ada masalah yang diketahui.

Cara Mendapatkan Dukungan

Buat masalah di repositori ini jika Anda menemukan bug atau memiliki pertanyaan tentang konten.

Berkontribusi

Jika Anda ingin menyumbangkan kode, tawarkan perbaikan atau perbaikan, silakan kirim permintaan tarik. Karena alasan hukum, kontributor akan diminta untuk menerima DCO ketika mereka membuat permintaan tarik pertama ke proyek ini. Ini terjadi dengan cara otomatis selama proses pengiriman. SAP menggunakan teks DCO standar dari Linux Foundation.

Lisensi

Hak Cipta (C) 2024 SAP SE atau Perusahaan Afiliasi SAP. Semua hak dilindungi undang -undang. Proyek ini dilisensikan di bawah Lisensi Perangkat Lunak Apache, versi 2.0.