紙の公式リポジトリ「ChatGptは人間の専門家にどれだけ近いですか?比較コーパス、評価、および検出」。
→(?検出器用のフィードバックスペースも参照してください。ここにフィードバックを残してください!貴重なコメントを残してください!)

はい、 HC3という名前の最初の人間とChatGpt比較コーパスを提案します。
HC3と呼ばれる最初の人間とChatGptコントラストコーパスを提案します。

HC3データセットの最初のバージョンが利用可能になりましたか?
中国のコミュニティでは、HC3データセットもModelScopeで利用できます。
トレーニング/テストスプリットとフィルタリングバージョンの紙、hc3/readme.mdのGoogleドライブリンクを参照してください。
このコーパスで使用されているソースデータセットには、CC-SAよりも厳しい特定のライセンスがある場合、当社の製品はCC-SAライセンスに従います。
| 英語の分割 | ソース | ソースライセンス | 注記 |
|---|---|---|---|
| reddit_eli5 | ELI5 | BSDライセンス | |
| open_qa | ウィキカ | PWCカスタム | |
| wiki_csai | ウィキペディア | CC-by-sa | |
| 薬 | 医療対話 | 未知 | 尋ねる |
| ファイナンス | fiqa | 未知 | 尋ねる? |
| 中国の分裂 | ソース | ソースライセンス | 注記 |
|---|---|---|---|
| open_qa | webtextqa&baikeqa | MITライセンス | |
| バイケ | Baidu Baike | なし | |
| nlpcc_dbqa | NLPCC-DBQA | 未知 | 尋ねる |
| 薬 | 中国の医療対話 | CC-by-NC 4.0 | |
| ファイナンス | Financezhidao | CC-by 4.0 | |
| 心理学 | Baidu AI Studioで | CC0 | |
| 法 | Legalqa | 未知 | 尋ねる |
(ホストされていますか?ハグするフェイススペース)
3種類の検出器を提供します。すべてバイリンガル / 3種類の検出器を提供します。すべて英語です。
Modelscope Chinese Community Platformでは、3つのバージョンの検出器もすべて利用可能です。
モデルの重みはすべて、顔モデルで利用できますか?
| モデルチェックポイント | コメント |
|---|---|
| Chatgpt-detector-roberta | 単一のテキストを検出します |
| chatgpt-qa-detector-roberta | 質問回答ペアを検出します |
| chatgpt-detector-roberta-chinese | 単一のテキスト、中国語版を検出します |
| chatgpt-qa-detector-roberta-chinese | 中国語版のQAテキストのペアを検出します |
英語モデルは、中国のモデルに基づいています。
| イベント | 日付 |
|---|---|
| プロジェクトの発売 /プロジェクトの起動 | 2022-12-09✅ |
| 比較データ収集 /比較データ収集 | 今から2022-12-11から?€ |
| chatgpt検出器(デモ) /検出器デモリリースをリリースします | 2023-01-11✅ |
| モデルのリリース /モデルオープンソース | 2023-01-18✅ |
| 比較コーパスリリース /コーパスオープンソース | 2023-01-18✅ |
| 研究論文 /研究論文のリリース | 2023-01-19✅ |
| ... | ... |
このペーパーのチェックアウトarxiv:2301.07597
@article{guo-etal-2023-hc3,
title = "How Close is ChatGPT to Human Experts? Comparison Corpus, Evaluation, and Detection",
author = "Guo, Biyang and
Zhang, Xin and
Wang, Ziyuan and
Jiang, Minqi and
Nie, Jinran and
Ding, Yuxuan and
Yue, Jianwei and
Wu, Yupeng",
journal={arXiv preprint arxiv:2301.07597}
year = "2023",
}
ChatGptの発売から10日後の2022年12月9日に、2つの目的でこのプロジェクトを開始しました。
ChatGptの起動の10日目である2022年12月9日に、2つの目的でこのプロジェクトを開始しました。
私たちのプロジェクトをフォローしてください。私たちはChatGPT検出器のプレビューをリリースしました。
私たちのプロジェクトをフォローしてください。ChatGPTDetectorバージョンをリリースし、約1週間以内にオープンソースモデルとデータセットをリリースします。私たちは、一般の人々からフィードバックを受け取ることを楽しみにしており、モデルを改善し、オープンアカデミックリサーチに貢献するのに役立ちます。
私たちは、このプロジェクトのチームが6つの大学/企業のエンジニアで構成されていることを望んでいる重要でない研究者のグループです。
私たちは(ChatGptの影に)研究者の小さなグループですが、コミュニティにとって意味のあることをしたいと思っています。このプロジェクトのチームは、6つの大学/企業の博士課程の学生とエンジニアで構成されています。
| Biyang Guo | ミンキ・ジャン | Ziyuan Wang | Xin Zhang |
| ジンラン・ニー | Yuxuan Ding | Jianwei Yue | Yupeng wu |