llm cooperation

LLM-cooperation

이 repo에는 사회적 딜레마에 협력하기위한 대규모 모델의 성향을 확인하기위한 코드, 설명 및 실험 결과가 포함되어 있습니다. 실험은 다음 논문에 설명되어 있습니다.

S. Phelps와 Yi Russell, 실험 경제학, 작업 논문, 2023 년 5 월, ARXIV : 2305.07970을 사용하여 대형 언어 모델에서 출현 목표와 같은 행동을 조사합니다.

S. Phelps와 R. Rannson, 모델 및 주석 남성-대규모 모델을 사용한 AI 정렬의 주요 요가 문제에 대한 행동 경제학 연구 , 2023 년 7 월, ARXIV : 2307.11137

시작하기

1. Miniforge를 설치하십시오.
2. 쉘에서 :

 export OPENAI_API_KEY= ' <my key> '
make install
make run

구성

특정 실험 및 파라미터 조합을 실행하려면 아래 지침을 따르십시오.

1. 쉘에서 :

mkdir ~ /.llm-cooperation
cat > ~ /.llm-cooperation/llm_config.py << EOF


grid = {
        "temperature": [0.1, 0.6],
        "model": ["gpt-3.5-turbo", "gpt-4"],
        "max_tokens": [300]
}


num_replications = 3


experiments = ["dictator", "dilemma"]
EOF

2. 필요한 값으로 $HOME/.llm-cooperation/llm_config.py 편집하십시오.

3. 쉘에서 :

 export OPENAI_API_KEY= ' <key> '
make run

기여

새로운 실험이 있으면 풀 요청을 제출하십시오. 모든 코드에는 해당 테스트가 있어야하며 모든 실험을 복제 할 수 있어야합니다.