of agentic AI: Six lessons from the people doing the work より引用 https://www.mckinsey.com/capabilities/quantumblack/our-insights/one-year-of-agentic-ai-six-lessons-from-the-people-doing-the-work ✓ PoCでは動くのに、実運用で使うと微妙な出力(AI Slop=AIが吐き出す 低品質なゴミ)を出しつづけ、ユーザーの信頼を失うケースが多発している。 ✓ これを防ぐには、従業員教育と同じくらい 「エージェントの教育(評価)」に 投資する必要がある。 ➢ 出力は妥当か。 ➢ 想定通りに振る舞っているか。 ➢ 基準に照らして問題はないか。 “AI Slop” を防ぐには、評価設計が不可欠。
The state of AI in 2025: Agents, innovation, and transformation より引用 https://www.mckinsey.com/capabilities/quantumblack/our-insights/the-state-of-ai ✓ 回答企業の62%がAgentic AIを実験中。 しかし、スケーリング(全社展開)できているのは、全体の23%に留まる。 ✓ 多くの企業が “パイロットの壁” に直面している。 ➢ AI は、自身の出力を客観的に評価することが難しい ➢ 評価モデルは、ハルシネーションを吐き出すこともある ➢ バイアスは、再生産され、しかもそれが高速化している