llm round trip correctness

評估BPMN生成的往返校正性

描述

該存儲庫測試了BPMN模型管道的文本代理評估方法的想法。代理評估涉及一條往返管道，“到BPMN到文本”，並在沒有地面真相BPMN的情況下計算平均文本到文本相似性。為了證明代理方法是否有效，我們首先必須研究現有的BPMN到BPMN從Model_evaluation模塊評估如何與代理文本與文本方法相關。這項工作的靈感來自此出版物的文本，以代碼往返。

要求並設置

要求在此pyproject.toml文件中。克隆存儲庫後，運行：

poetry install

入門

要運行管道，請使用類似的命令：

screen -d -m python genai_gpt_pipeline.py --model-path ./data/pet/ground_json --text-path ./data/pet/process_descriptions --example pet --direction t2t 

CSV文件寫入結果目錄。 Jupyter筆記本用於可視化結果。

已知問題

沒有已知的問題。

如何獲得支持

如果您找到錯誤或對內容有疑問，請在此存儲庫中創建問題。

貢獻

如果您想貢獻代碼，提供修復程序或改進，請發送拉動請求。由於法律原因，將要求貢獻者在為該項目提出第一個拉動請求時接受DCO。在提交過程中，這種情況以自動方式發生。 SAP使用Linux基金會的標準DCO文本。

執照

版權（C）2024 SAP SE或SAP關聯公司。版權所有。該項目是根據Apache軟件許可證（版本2.0版）許可的。