「criteria drift」の論考

AI製品の失敗パターンをどう見つけ出すか、メトリクス先行がハマる罠

AI評価（evals）の専門家Hamel HusainとShreya Shankarは、Shopifyがevals導入でAIワークフローを2.2倍高速化・68%のコスト削減を実現するなど、50社以上のAI企業でevals投資がROIに直結した事例を報告する。