llm cooperation
v0.3.0
該回購包含實驗的代碼,解釋和結果,以確定大語模型在社會困境中合作的傾向。實驗在以下論文中進行了描述。
S. Phelps和Yi Russell,使用實驗經濟學調查大語言模型中的新興目標行為,工作文件,2023年5月,ARXIV:2305.07970
模型和錫人的S. Phelps和R. Rannson-使用大語模型對AI對齊中的主要代理問題的行為經濟學研究,工作文件,2023年7月,ARXIV:2307.11137
export OPENAI_API_KEY= ' <my key> '
make install
make run要運行特定的實驗和參數組合,請遵循下面的說明。
mkdir ~ /.llm-cooperation
cat > ~ /.llm-cooperation/llm_config.py << EOF
grid = {
"temperature": [0.1, 0.6],
"model": ["gpt-3.5-turbo", "gpt-4"],
"max_tokens": [300]
}
num_replications = 3
experiments = ["dictator", "dilemma"]
EOF編輯$HOME/.llm-cooperation/llm_config.py具有所需值。
在外殼中:
export OPENAI_API_KEY= ' <key> '
make run如果您有一個新實驗,請提交拉動請求。所有代碼都應具有相應的測試,並且所有實驗均應可複制。