À retenir : – Siri n’a donné la bonne réponse que pour 20 des 58 matchs du Super Bowl. – Taux de réussite de Siri seulement de 34 %. – Siri a fourni des réponses hors sujet et incorrectes. – Comparé à d’autres IA, Siri a obtenu des performances nettement inférieures. – Les anciennes versions de Siri étaient plus fiables en redirigeant vers le web.
Siri essuie une nouvelle désillusion lorsqu’il s’agit de répondre aux questions sur le Super Bowl et la NFL. John Gruber a récemment qualifié l’assistant vocal d’Apple de « blague pas drôle » après qu’il n’ait pas réussi à indiquer le vainqueur du Super Bowl 13. Cette critique fait suite à une évaluation plus générale effectuée par Paul Kafasis, qui a testé la capacité de Siri à reconnaître les gagnants des Super Bowls, allant du premier au soixantième. Les résultats sont alarmants : Siri n’a correctement identifié que 20 des 58 matchs, affichant ainsi un taux de réussite d’à peine 34 %.
La situation se dégrade encore davantage, puisque Siri a commis des erreurs lors de 15 Super Bowls consécutifs et a souvent donné des réponses qui sortaient complètement du sujet, fournissant des informations non pertinentes ou carrément erronées avec une confiance déroutante. Plus surprenant encore, il a attribué aux Philadelphia Eagles un total fictif de 33 victoires au Super Bowl, alors que cette équipe ne compte qu’un seul titre.
Gruber ne s’est pas arrêté là et a comparé les performances de Siri avec celles d’autres systèmes d’intelligence artificielle tels que ChatGPT, Kagi, DuckDuckGo et Google. Ces derniers ont tous réussi à répondre correctement aux mêmes questions concernant les Super Bowls et étaient même capables de donner des informations précises sur les matchs futurs.
Il est par ailleurs intéressant de noter que certaines anciennes versions de Siri — celles qui n’étaient pas soutenues par Apple Intelligence — semblaient faire preuve d’une plus grande fiabilité en redirigeant les utilisateurs vers des recherches web pour fournir des réponses exactes
Grand maitre Goa'uld des dessins animés, j'ai beaucoup aidé sur l'ancienne version du site de 2002 et je reviens filer un coup de main quand j'ai du temps.