Offizielles Repository von Papier "Wie nah ist Chatgpt an menschliche Experten? Vergleichskorpus, Bewertung und Erkennung".
Siehe auch → (? Feedback -Speicherplatz für Detektoren Bitte verlassen Sie Ihr Feedback hier! Bitte hinterlassen Sie Ihre wertvollen Kommentare!)

Ja, wir schlagen den ersten menschlichen vs. Chatgpt -Vergleichskorpus mit dem Namen HC3 vor.
Wir schlagen den ersten menschlichen vs. Chatgpt -Kontrastkorpus als HC3 vor.

Die erste Version der HC3 -Datensätze ist jetzt verfügbar?
In der chinesischen Gemeinschaft ist der HC3 -Datensatz auch in ModelsCope verfügbar:
Zug-/Test -Splits und gefilterte Versionen des Papiers, Ref zu Google Drive -Links in HC3/Readme.md.
Wenn die in diesem Korpus verwendeten Quelldatensätze eine bestimmte Lizenz haben, die strenger ist als CC-by-SA, folgen unsere Produkte dieselben.
| Englische Spaltung | Quelle | Quellenlizenz | Notiz |
|---|---|---|---|
| reddit_eli5 | ELI5 | BSD -Lizenz | |
| open_qa | Wikiqa | PwC Custom | |
| Wiki_csai | Wikipedia | Cc-by-sa | |
| Medizin | Medizinischer Dialog | Unbekannt | Fragen |
| Finanzen | Fiqa | Unbekannt | Fragen vorbei? |
| Chinesische Trennung | Quelle | Quellenlizenz | Notiz |
|---|---|---|---|
| open_qa | WebTextqa & Baikeqa | MIT -Lizenz | |
| Baike | Baidu Baike | Keiner | |
| NLPCC_DBQA | NLPCC-DBQA | Unbekannt | Fragen |
| Medizin | Chinesischer medizinischer Dialog | CC-by-NC 4.0 | |
| Finanzen | Financezhidao | CC-by 4.0 | |
| Psychologie | Auf Baidu AI Studio | CC0 | |
| Gesetz | Legalqa | Unbekannt | Fragen |
(Veranstaltet auf den Gesichtsräumen)
Wir bieten drei Arten von Detektoren, alle zweisprachig / wir bieten drei Arten von Detektoren, alle in englischer Sprache:
Auf der modelscope chinesischen Community -Plattform sind auch alle drei Versionen von Detektoren verfügbar:
Die Modellgewichte sind alle bei Umarmungsmodellen erhältlich:
| Modellkontrollpunkte | Kommentar |
|---|---|
| Chatgpt-Detector-Roberta | Ein einzelnes Textstück zu erkennen |
| CHATGPT-QA-DETECTOR-ROBERTA | Ein Frage-Antwort-Paar erkennen |
| Chatgpt-Detector-Roberta-Chinese | Einzeltext erkennen, chinesische Version |
| Chatgpt-Qa-Detector-Roberta-Chinese | Erkennen Sie ein Paar QA -Text, chinesische Version |
Die englischen Modelle basieren auf Roberta-Base.
| Ereignisse | Daten |
|---|---|
| Projektstart / Projektstart | 2022-12-09 ✅ |
| Vergleichsdatenerfassung / Vergleichsdatenerfassung | 2022-12-11 bis jetzt? Euen |
| Veröffentlichung von ChatGPT -Detektor (DEMO) / DETECTOR Demo Release | 2023-01-11 ✅ |
| Modelle Release / Modell Open Source | 2023-01-18 ✅ |
| Vergleichskorpus -Release / Corpus Open Source | 2023-01-18 ✅ |
| Forschungspapier / Forschungspapierfreigabe | 2023-01-19 ✅ |
| ... | ... |
Kasse dieses Papiers Arxiv: 2301.07597
@article{guo-etal-2023-hc3,
title = "How Close is ChatGPT to Human Experts? Comparison Corpus, Evaluation, and Detection",
author = "Guo, Biyang and
Zhang, Xin and
Wang, Ziyuan and
Jiang, Minqi and
Nie, Jinran and
Ding, Yuxuan and
Yue, Jianwei and
Wu, Yupeng",
journal={arXiv preprint arxiv:2301.07597}
year = "2023",
}
Am 9. Dezember 2022, das 10 Tage nach dem Start von ChatGPT ist, haben wir dieses Projekt für zwei Zwecke gestartet:
Am 9. Dezember 2022, dem 10. Tag des Chatgpt -Starts, haben wir dieses Projekt für zwei Zwecke gestartet:
Willkommen zu unserem Projekt !
Willkommen bei unserem Projekt . Wir freuen uns darauf, Feedback von der Öffentlichkeit zu erhalten, um unser Modell zu verbessern und gemeinsam zu einer offenen akademischen Forschung beizutragen!
Wir sind eine Gruppe unbedeutender Forscher (im Schatten von ChatGPT), in der Hoffnung, dass das Team für diese Projekte bedeutende Arbeiten aus 6 Universitäten/Unternehmen besteht.
Wir sind eine kleine Gruppe von Forschern (im Schatten von Chatgpt), möchten aber für die Community etwas Sinnvolles tun. Das Team dieses Projekts besteht aus Doktoranden und Ingenieuren von 6 Universitäten/Unternehmen.
| Biyang Guo | Minqi Jiang | Ziyuan Wang | Xin Zhang |
| Jinran Nie | Yuxuan Ding | Jianwei Yue | Yupeng Wu |