llm cooperation
v0.3.0
このレポは、社会的ジレンマに協力する大規模モデルの傾向を確認するためのコード、説明、および実験の結果が含まれています。実験は、次の論文で説明されています。
S. PhelpsとYi Russell、実験的経済学を使用した大規模な言語モデルの緊急目標のような行動、ワーキングペーパー、2023年5月、ARXIV:2305.07970
Models and Tin MenのS. PhelpsとR. Rannson-大規模な言語モデルを使用したAIアライメントの主要な問題の行動経済学研究、ワーキングペーパー、2023年7月、Arxiv:2307.11137
export OPENAI_API_KEY= ' <my key> '
make install
make run特定の実験とパラメーターの組み合わせを実行するには、以下の指示に従ってください。
mkdir ~ /.llm-cooperation
cat > ~ /.llm-cooperation/llm_config.py << EOF
grid = {
"temperature": [0.1, 0.6],
"model": ["gpt-3.5-turbo", "gpt-4"],
"max_tokens": [300]
}
num_replications = 3
experiments = ["dictator", "dilemma"]
EOF $HOME/.llm-cooperation/llm_config.pyを編集する必要があります。
シェル:
export OPENAI_API_KEY= ' <key> '
make run新しい実験がある場合は、プルリクエストを送信してください。すべてのコードには対応するテストが必要であり、すべての実験は複製可能である必要があります。