AIチャットボットによるニュース速報を信用すべきでない理由

簡単なニュース要約を提供するために AI チャットボットを使用する前に、必ずよく検討してください。 BBC の新しいレポートによると、人気のチャットボットは要約結果に大きな誤りを犯していることが判明しました。

Google Geminiは問題のある要約の割合が最も高い

テストには、 ChatGPT、Google Gemini、Microsoft Copilot、Perplexity AIが含まれます。まず、BBC は各チャットボットにニュースに関する 100 の質問をし、可能な場合は BBC ニュースソースを使用するように要求しました。

その後、BBCの専門家がこれらの要約の質を評価した。要約のうち 51% に、事実の不正確さ、誤引用、古い情報など、何らかの誤りが含まれていました。

そのうち 19% には、日付の誤りなど、何らかの事実上の誤りがありました。また、要約の中で BBC に帰属する引用の 13% は、元の記事から変更されていたか、チャットボットに提供された記事には存在していなかった。

チャットボットによる分析では、Google の Gemini が最も悪く、要約の 60% 以上が問題のある情報を含んでいました。 Microsoft Copilot は 50% で 2 位となり、ChatGPT と Perplexity では約 40% が問題のある応答でした。

BBCは結論として、多くの問題は単なる誤報ではないと述べた。

この調査では、AIアシスタントが犯す誤りの範囲は事実の不正確さを超えていることも判明した。私たちがテストした AI アシスタントは、意見と事実を区別するのに苦労し、論評してしまい、必要な文脈を含められないことが多かった。フィードバック内のすべての記述が正確であったとしても、このような問題により、誤解を招いたり偏ったフィードバックが生じる可能性があります。

多くの人は、テクノロジーの信頼性を信用していないため、ニュースを要約するために AI チャットボットを使用したことがありません。しかし、問題のある結果が多数あることを考えると、研究結果は依然として驚くべきものだった。 AIがニュースについてより詳しく知るための信頼できる手段となるまでには、まだ長い道のりがあります。

AI機能はまだ開発中

AIテクノロジー、特にチャットボットは急速に進歩し続けています。しかし、BBCの調査が示すように、ニュースに関する正確な情報を期待するのは非常に問題のある領域です。

BBC は、別の AI 搭載機能である Apple Intelligence Notification Summary についても不満を表明している。 2024年12月、同チャンネルのニュース速報では、ルイジ・マンジョーネが自殺したと誤って報じられた。彼はヘルスケア会社のCEOブライアン・トンプソンを射殺した容疑で告発されている男だ。

AppleはBBCなどからの苦情に応えて、iOS 18.3以降、ニュースおよびエンターテイメントアプリの要約機能を一時的に無効にした。

したがって、ニュースをフォローしたいときは、シンプルに、AI の要約をスキップして自分で読んでください。

Tags: #チャットボットAI #AIによるニュース要約 #AIからのニュース要約を信頼すべきではない