llm cooperation

Koperasi LLM

Repo ini berisi kode, penjelasan, dan hasil percobaan untuk memastikan kecenderungan model bahasa besar untuk bekerja sama dalam dilema sosial. Eksperimen dijelaskan dalam makalah berikut.

S. Phelps dan Yi Russell, Investigasi Perilaku seperti tujuan yang muncul dalam model bahasa besar menggunakan Ekonomi Eksperimental , Kertas Kerja, Mei 2023, ARXIV: 2305.07970

S. Phelps dan R. Rannson, dari Model dan Tin Men-Studi Ekonomi Perilaku tentang Masalah Agen Kepala Sekolah dalam Penyelarasan AI Menggunakan Model Besar Besar , Kertas Kerja, Juli 2023, ARXIV: 2307.11137

Memulai

1. Pasang miniforge.
2. Dalam cangkang:

 export OPENAI_API_KEY= ' <my key> '
make install
make run

Konfigurasi

Untuk menjalankan percobaan dan kombinasi parameter tertentu, ikuti instruksi di bawah ini.

1. Dalam cangkang:

mkdir ~ /.llm-cooperation
cat > ~ /.llm-cooperation/llm_config.py << EOF


grid = {
        "temperature": [0.1, 0.6],
        "model": ["gpt-3.5-turbo", "gpt-4"],
        "max_tokens": [300]
}


num_replications = 3


experiments = ["dictator", "dilemma"]
EOF

2. Edit $HOME/.llm-cooperation/llm_config.py dengan nilai yang diperlukan.

3. Dalam cangkang:

 export OPENAI_API_KEY= ' <key> '
make run

Berkontribusi

Jika Anda memiliki eksperimen baru maka silakan kirim permintaan tarik. Semua kode harus memiliki tes yang sesuai dan semua percobaan harus dapat ditiru.