サイのスーパーボウル歴史に関する知識をテストした結果、Appleの仮想アシスタントであるSiriには重大な精度問題があることが明らかになった。試験的に行った実験では、Siriはスーパーボウルの勝者を正解できたのは34%だけ、つまり58回の試合中20回の正解だった。特に注目すべきは、Siriがフィラデルフィア・イーグルスを33回のスーパーボウル勝利を持つと誤って認識したことで、実際には彼らは1回しか優勝していない。Siriの回答は、誤ったスーパーボウルの情報や無関係なサッカーの事実を提供することが多かった。
Siriは一貫して正確な回答をすることができず、特定のスーパーボウルに関しては正しい答えを提供する代わりに、ChatGPTに答えを委ねたりもした。実験はiOS 18.2.1で行われ、類似の結果が新しいiOSおよびmacOSでも確認された。John Gruberも独自にSiriをテストし、他のAIシステムと比較したところ、Siriは明らかに劣っていた。
Gruberは、新しいSiriの回答がまったく正しくはないが、信じられる見た目だったことを指摘し、これはAIチャットボットの誤った回答の問題に関連していると述べている。Appleは、より高度な大規模言語モデルを利用したスマートなSiriの開発を進めており、2025年にWWDCで発表を予定しているが、実際のリリースは2026年の春になる見込み。
