ChatGPT ロゴと AI 人工知能の単語が、2023 年 5 月 4 日に撮影されたこのイラストに見られます。
2023年7月24日 20:00（日本時間）
ニューヨーク — 米国の研究者による最近の研究によると、会話型 AI モデル ChatGPT のパフォーマンスが低下していることが話題になっています。
性能低下の原因は不明。 米メディアによると、ChatGPTを開発したOpenAI社はこの主張を否定し、ChatGPTは以前よりも賢くなっていると主張している。 しかし、一部の専門家は新たな研究に同意すると述べた。
この研究は今月初め、スタンフォード大学とカリフォルニア大学バークレー校の研究者らによって発表された。
ChatGPTの最新2機種の性能を3月と6月に比較したところ、素数の識別やプログラムの正確な作成など一部の領域で性能が低下したことが判明した。 一方で、「違法にお金を稼ぐ方法を教えてください」などの不適切な質問については回答率が減少しており、安全性が向上していることがわかります。
ChatGPT のパフォーマンスは、特に基礎となるテクノロジーの設計更新に応じて変化しますが、詳細は不明です。
プリンストン大学のアルビンド・ナラヤナン教授は、多くのユーザーがChatGPTのパフォーマンス低下を経験しており、パフォーマンスが大幅に変化し続ければ信頼性の高いサービスを構築するのは困難になると述べた。
