Introducing The Specialized Intelligence Index
Fireworks AI は、実務に即したドメイン特化タスクでモデル性能を測る評価フレームワーク Specialized Intelligence Index を発表した。標準化された公開ベンチマークではなく、実務者が構築した評価を用い、実際のワークフローと制約を反映させる。初回リリースはヘルスケア、法務、金融、サイバーセキュリティ、カスタマーサポート、生産性、ソフトウェアエンジニアリングの7領域を対象とする。
Fireworks AI 公式ニュースルームで全文を読む ↗