「低い精度のため、OpenAIはAI検出器を閉鎖します」

Due to low accuracy, OpenAI will shut down the AI detector.

人工知能パワーハウスのOpenAIは、正確性の低いAI検出ソフトウェアをこっそりと中止しました。

OpenAIが開発したAI分類器は、2023年1月31日に初めてリリースされ、教師や教授などのユーザーが人間の書かれたテキストとAI生成のテキストを区別するのを支援することを目的としていました。

ただし、ツールのリリースを発表した元のブログ投稿によると、AI分類器は2023年7月20日をもって中止されました:

「2023年7月20日をもって、AI分類器は正確性が低いため利用できなくなりました。」

ツールへのリンクはもはや機能しておらず、ツールが中止された理由については簡単な説明しか提供されていません。ただし、同社はAI生成コンテンツを特定するための新しいより効果的な手法を検討していると説明しています。

ノートには次のように記載されています。「フィードバックを組み込む作業を行っており、現在はテキストのより効果的な起源技術を研究しており、オーディオやビジュアルコンテンツがAI生成されたものかをユーザーが理解できる仕組みの開発と展開にコミットしています」と。

OpenAIの元のAI分類器の動作。出典:OriginalityAI

OpenAIは最初から、この検出ツールはエラーが発生しやすく、「完全に信頼性のある」とは見なされないことを明確に述べていました。

同社は、AI検出ツールの制限には、1,000文字未満のテキストの検証が「非常に不正確」であり、人間が書いたテキストをAI生成と「自信を持って」ラベル付けすることができると説明しています。

関連記事: Appleは独自のGPT AIシステムを持っていますが、公開計画は明言されていません:報告書

この分類器は、OpenAIの製品の中で最も厳しい批判を受けています。

2023年7月18日、スタンフォード大学とUCバークレーの研究者が発表した研究によれば、OpenAIの主力製品であるChatGPTは、年齢とともに大幅に悪化していることが明らかになりました。

私たちは、GPT4の6月バージョンとGPT3.5および3月バージョンの*同じ質問*への応答について、ChatGPTの振る舞いを時間の経過とともに評価し、新しいバージョンが一部のタスクで悪化していることを発見しました。Lingjiao Chenと共同で評価しました。@matei_zaharia https://t.co/TGeN4T18Fd https://t.co/36mjnejERy pic.twitter.com/FEiqrUVbg6

— James Zou (@james_y_zou) 2023年7月19日

研究者たちは、過去数ヶ月の間に、ChatGPT-4の素数の正確な識別能力が97.6%からわずか2.4%に急落したことを発見しました。さらに、ChatGPT-3.5とChatGPT-4の両方が、新しいコード行を生成する能力が著しく低下していることも確認されました。

AI Eye: AIがAIコンテンツに訓練されるとMADになる、ThreadsはAIデータの損失リーダーですか?