音声認識AIの性能比較にエジプトとナイジェリアの英語が追加、評価の偏りを防ぐ

米Hugging Faceは、音声認識モデルの公開評価ランキング「Open ASR Leaderboard」に、エジプトとナイジェリアの英語アクセントを新たに追加したと発表した。Liva AIとの協業を通じて実利用から得た非公開データを導入し、特定の試験対策による過度なスコア最適化（benchmaxxing）を防ぎつつ、評価の多様性と信頼性を高める狙いがある。

同プラットフォームでは過去にAppenやDataOceanAIから5つのアクセントを含む11の非公開データを導入したほか、Voice Arenaと連携してインド英語のデータも追加してきた。今回の拡充に伴い、言語学者カチュルの「3円モデル」に基づく分類を導入し、米国と非米国の比較や、英語を母語とする地域と公用語・学習対象とする地域を分けた詳細な性能内訳を報告する。今後アクセントが増えた際には分類をさらに細分化する方針だ。