Salesforceが先日公開したCRM向けAI モデルのベンチマークは、AI活用を検討する企業にとってまさに福音となる画期的なツールです。従来のベンチマークは汎用的な知識やタスクを対象としており、企業がCRMで求める「コスト」「信頼性」といった観点からは不十分でした。この Salesforce の新しいベンチマークは、まさにその点を補う画期的なツールとなりそうです。
4つの観点でAIモデルを徹底評価
このベンチマークは、「精度」「コスト」「スピード」「信頼性・安全」の 4 つの観点でモデルを評価します。従来のベンチマークでは評価されなかった「コスト」と「信頼性・安全」は、AI活用を考える企業にとって見過ごせないポイントですよね。高性能でも高額だったり、安全性が担保できないようでは実務導入は難しくなってしまいます。
高性能≠高コスト・低安全
ベンチマーク結果によると、必ずしも高性能なモデルが高コスト・低安全というわけではないことが明らかになりました。OpenAIのGPT-4系は精度が高くても安全性が低く、逆にGoogleのGemini Proは安全性を重視した作りになっていることが伺えます。自社のCRMにとって何が優先事項なのか、このベンチマークを活用することでより戦略的なAIモデル選びが可能になりそうです。
まとめ
Salesforceは今後もベンチマークの機能追加を予定しており、CRM業務に特化したモデルの評価や、カスタマイズされたモデルの対応なども検討されているようです。AI活用がますます進んしていく中で、今回のようなベンチマークは企業にとって心強い味方になってくれるでしょう。
このベンチマークを活用することで、自社のニーズに最適なAIモデルを見つけることができ、CRM業務の効率化や顧客満足度の向上を実現することができるはずです。
引用元：https://aibusiness.com/ml/salesforce-launches-ai-benchmark-to-evaluate-crm-deployments
コメント