chatgpt comparison detection

Projet de détection de comparisation ChatGPT?

Référentiel officiel de papier "À quelle distance est proche des experts humains? Corpus de comparaison, évaluation et détection".

Voir aussi → (? Espace de rétroaction pour les détecteurs, n'hésitez pas à laisser vos commentaires ici! Veuillez laisser vos précieux commentaires!)

---

Corpus de comparaison de Chatgpt humain (HC3) / humain - Chatgpt Question and réponses Comparaison Corpus

Oui, nous proposons le premier corpus de comparaison humain vs Chatgpt , nommé HC3 .

Nous proposons le premier corpus de contraste humain contre Chatgpt appelé HC3 .

La première version des ensembles de données HC3 est désormais disponible?

• HC3-anglais
• Hc3-chinois

Dans la communauté chinoise, l'ensemble de données HC3 est également disponible sur Modelscope:

• HC3-anglais
• Hc3-chinois

Train / Tester Splits et Versions filtrées du papier, Ref to Google Drive Links dans HC3 / Readme.md.

Copyright de l'ensemble de données

Si les ensembles de données source utilisés dans ce corpus ont une licence spécifique qui est plus stricte que CC-BY-SA, nos produits suivent la même chose.

Part de l'anglais	Source	Licence source	Note
reddit_eli5	Eli5	Licence BSD
Open_QA	Wikiqa	PwC Custom
wiki_csai	Wikipedia	Cc-by-sa
médecine	Dialogue médical	Inconnu	Demande
finance	FIQA	Inconnu	Demander par?

Split chinois	Source	Licence source	Note
Open_QA	Webtextqa & baikeqa	Licence MIT
baike	Baidu baike	Aucun
nlpcc_dbqa	NLPCC-DBQA	Inconnu	Demande
médecine	Dialogue médical chinois	CC-BY-NC 4.0
finance	Financezhidao	CC-BY 4.0
psychologie	Sur Baidu AI Studio	CC0
loi	Legalqa	Inconnu	Demande

---

Détecteurs / détecteurs de contenu de Chatgpt

(Hébergé sur? Embrassant les espaces pour le visage)

Nous fournissons trois types de détecteurs, tous en bilingue / Nous fournissons trois types de détecteurs, le tout en anglais:

• Version / QA Version: Détectez si une réponse est générée par ChatGPT pour certaines questions , en utilisant des classes basées sur PLM / Déterminez si la réponse à une question est générée par ChatGPT et développez à l'aide d'un classificateur basé sur PTM;
• Version Sinlge-Text / Texte indépendant Version: Détectez si un texte est généré par ChatGPT, en utilisant des conduites de classe basées sur PLM / Déterminez si un seul texte est généré par ChatGPT et développez à l'aide d'un classificateur basé sur PTM;
• Version linguistique / version linguistique: détecter si un morceau de texte est généré par ChatGPT, en utilisant des fonctionnalités linguistiques / Déterminez si un seul texte est généré par ChatGpt et développez à l'aide d'un modèle basé sur des fonctionnalités linguistiques;

Sur la plate-forme communautaire chinoise Modelscope, les trois versions des détecteurs sont également disponibles:

• Version d'AQ / Q&R Version
• Version Sinlge-Text / Version du texte autonome
• Version linguistique / version linguistique

Les poids du modèle sont tous disponibles?

Points de contrôle du modèle	Commentaire
chatppt-détecteur-Roberta	Pour détecter un seul morceau de texte
chatppt-QA-Detector-Roberta	Pour détecter une paire de réponses aux questions
chatppt-détecteur-Roberta-chinois	Détecter un seul texte, version chinoise
chatppt-QA-détecteur-Roberta-chinois	Détecter une paire de texte QA, version chinoise

Les modèles anglais sont basés sur la base de Roberta.

---

Dates importantes / nœuds importants:

Événements	Dates
Lancement du projet / lancement du projet	2022-12-09 ✅
Collecte de données de comparaison / Collecte de données de comparaison	2022-12-11 à maintenant? ️
Libérer le détecteur Chatgpt (démo) / Détecteur Release Demo	2023-01-11 ✅
Modèles Release / Modèle open source	2023-01-18 ✅
Comparaison Corpus Release / Corpus Open Source	2023-01-18 ✅
Document de recherche / Research Document Release	2023-01-19 ✅
...	...

---

Citation

Découvrez ce papier arxiv: 2301.07597

 @article{guo-etal-2023-hc3,
    title = "How Close is ChatGPT to Human Experts? Comparison Corpus, Evaluation, and Detection",
    author = "Guo, Biyang  and
      Zhang, Xin  and
      Wang, Ziyuan  and
      Jiang, Minqi  and
      Nie, Jinran  and
      Ding, Yuxuan  and
      Yue, Jianwei  and
      Wu, Yupeng",
    journal={arXiv preprint arxiv:2301.07597}
    year = "2023",
}

---

Notre histoire ... / Histoire de fond

Le 9 décembre 2022, qui est 10 jours après le lancement de Chatgpt, nous avons commencé ce projet, à deux fins:

1. Pour créer des modèles open source pour détecter efficacement le contenu généré par ChatGPT;
2. Pour collecter un précieux corpus de questions et réponses de comparaison de chattes humains , pour faciliter la recherche publiée.

Le 9 décembre 2022, le 10e jour du lancement de Chatgpt, nous avons commencé ce projet à deux fins:

1. Faire des outils de modèle open source pour détecter efficacement le contenu généré par ChatGpt;
2. Recueillir un lot de précieux corpus de questions et de réponses bilingues chinoises et anglaises par rapport aux humains et au chatppt pour aider à la recherche académique pertinente.

Bienvenue à suivre notre projet !
Bienvenue à suivre notre projet. Nous sommes impatients de recevoir des commentaires du grand public pour nous aider à améliorer notre modèle et à contribuer à ouvrir des recherches académiques ensemble!

À propos de nous / à propos de nous

Nous sommes un groupe de chercheurs insignifiants (dans l'ombre de Chatgpt) dans l'espoir de faire un travail important pour la communauté.
Nous sommes un petit groupe de chercheurs (dans l'ombre de Chatgpt) mais nous voulons faire quelque chose de significatif pour la communauté. L'équipe de ce projet est composée d'étudiants doctorants et d'ingénieurs de 6 universités / entreprises.

Biyang Guo	Minqi Jiang	Ziyuan Wang	Xin Zhang
Jinran Nie	Yuxuan ding	Jianwei Yue	Yupeng Wu