言語処理における人工知能のパフォーマンスは、常に研究のホットトピックでした。最近の研究では、スペインの選挙問題に対処する際に、AIモデルは英語よりもはるかに正確ではないことが明らかになりました。この発見は、AI言語バイアスに広範囲にわたる注目を集めています。
最近、新しい研究では、選挙関連のスペイン語の質問に答える際に、AIモデルが英語の答えよりもはるかに正確ではないことが示されました。この研究は、AI Democracy Projectによって実施されました。AI民主主義プロジェクトは、証明ニュース、ファクトチェックサービスのFactChequeado、およびサンフランシスコ高度研究所によって共同で実施されました。

画像ソースノート:画像はAIによって生成され、画像認定サービスプロバイダーMidjourney
研究者は、アリゾナ州の有権者が「連邦政府の有権者であるとはどういう意味ですか?人類のClaude3opus、GoogleのGemini1.5Pro、MetaのLlama3、およびMistralのMixtral8x7b v0.1を含む、5つの主要な生成AIモデルの25モデル。
結果は、AIモデルの52%がスペイン語にエラーメッセージを含んでいたが、英語のエラー率は43%であることを示しています。この研究は、言語間のAIモデルの偏りの可能性と、そのような逸脱の悪影響の可能性を強調しています。
このような発見は驚くべきことです。特に今日、私たちが情報を取得するためにAIにますます頼っているとき。情報の正確性は、選挙中と通常の時期の両方で重要です。 AIモデルが他の言語と同様に機能しない場合、それらを使用する人は間違った情報に惑わされる可能性があります。
調査によると、AIテクノロジーは絶えず発展していますが、特に英語以外の言語処理において、情報の正確性と信頼性を確保するために、言語処理に取り組む必要があることが示されています。
キーポイント:
AIモデルは、スペインの選挙の質問に答える際の精度が低く、回答の52%が間違っています。
この調査では、有権者が尋ねるかもしれない質問をシミュレートし、英語とスペイン語の回答を比較しました。
AIモデルには言語バイアスがあり、ユーザーがエラーメッセージを取得する可能性があることがわかりました。
この研究は、AIテクノロジーの開発が言語の多様性により多くの注意を払う必要があることを思い出させてくれます。