llm cooperation
v0.3.0
该回购包含实验的代码,解释和结果,以确定大语模型在社会困境中合作的倾向。实验在以下论文中进行了描述。
S. Phelps和Yi Russell,使用实验经济学调查大语言模型中的新兴目标行为,工作文件,2023年5月,ARXIV:2305.07970
模型和锡人的S. Phelps和R. Rannson-使用大语模型对AI对齐中的主要代理问题的行为经济学研究,工作文件,2023年7月,ARXIV:2307.11137
export OPENAI_API_KEY= ' <my key> '
make install
make run要运行特定的实验和参数组合,请遵循下面的说明。
mkdir ~ /.llm-cooperation
cat > ~ /.llm-cooperation/llm_config.py << EOF
grid = {
"temperature": [0.1, 0.6],
"model": ["gpt-3.5-turbo", "gpt-4"],
"max_tokens": [300]
}
num_replications = 3
experiments = ["dictator", "dilemma"]
EOF编辑$HOME/.llm-cooperation/llm_config.py具有所需值。
在外壳中:
export OPENAI_API_KEY= ' <key> '
make run如果您有一个新实验,请提交拉动请求。所有代码都应具有相应的测试,并且所有实验均应可复制。