Siri failed a very simple Super Bowl test, getting 38 out of 58 questions wrong.

昨日、アップルのコメントаторジョン・グラブは、シリの現在のパフォーマンスを「恥ずかしいジョーク」と評価し、スーパーボウル13の勝者を正しく名付けられないことに例示しました。これは基本的な質問であり、USのあらゆるチャットボットも答えなければならないものだと言いました。

それが全くランダムな例ではないことがわかった：彼の友人パウエル・カファシスによって起こったもので、彼はサリはーライアーサービスをスーパーボウル1から60までテストすることに決めました。そして結果は良くありませんでした……

カファシスはブログ投稿で結果を共有しました。

Siriのパフォーマンスはいかがでしたか？最善の解釈をすると、Siriは58試合中20試合の優勝者を正確に回答しました。これは絶対的な悲惨な34％の完成率です。もしSiriが守備線のコーナーバックスだとしたら、NFLで解雇されること間違いなしです。

Siriは一度、正しい回答を連続4年（スーパーボウル9から12）獲得しましたが、その答えが間違っても正解だった場合にのみです。より現実的には、3回連続で3回正確に回答しました（スーパーボウル5から7、35から27、57から59）。最悪の場合、驚くべき15回連続で誤答しました（スーパーボウル17から32）。

「シリは大きなオーシャン・エイジーズファンだようですね。」

「最も面白いのは、フィラデルフィア・エイジスに驚異的な33勝のスーパーボウルを獲得したという評価であり、これは彼らが得た唯一の1勝に加えて」

「正しい答えが間違って」の部分は、SiriにスーパーボウルXの優勝者を尋ねられたときのことです。未知の理由により、Siriは長い返答でスーパーボウルIXについて話したのです。そして巧みなことに、両方の試合で優勝者は同じでした。

時としてSiriは完全に道端を外して、質問に答えられない場合があります。

新しい Siri — Apple Intelligence™ で駆動され、ChatGPT 集成が有効になっている — は完全にだが現実的ではない答えを提供します。これは最悪の方法です。また、一貫して間違っておりました。同じ質問を4回試しましたが、それぞれ異なる不正確な答えを得ました。これは完全な失敗です。

写真: カベル・ウォードズによるUnsplash