ベンチマークとは
AIの性能を測る共通テスト。数学・コーディング・読解などの問題集で点数を比べる。
たとえるなら — AIの模擬試験。ただし試験対策 (過学習) で実力以上の点が出ることもある。
実務モデルと技術benchmark
「ベンチマーク」が出てきたニュース
- Deep Principle、新素材や化学実験の計画と検証を担うAIモデルを公開
- 5人開発の小型AI、10倍超の米大手モデルをプログラミング性能で逆転
- エヌビディアが記憶容量不足を解消、計算効率を最大30倍高める新設計を公表
- トランスコスモス、中国の顧客対応大会で「デジタル優秀企業」上位10社を受賞
- OpenAI、安全検証AI「GPT-6 Cyber」発表 指示を守り948件の弱点特定
- 指示を待たずに「あとでやること」を適切な場面で自ら実行するAI技術が登場
