定義
AIの出力品質を体系的に測ること。テスト用の質問集に対する回答を採点し、プロンプトやモデルの変更が改善か改悪かを判断する。
実務でのポイント
「なんとなく良くなった」を卒業する道具。業務AIは10問でいいので評価セットを作ると運用が安定する。
この用語集について
CHK GROUPは、自社の経営（EC3チャネル・受注・在庫・顧客対応）をAIで自動運営している北九州の事業会社です。この用語集は実務者の視点で執筆しています。AIの導入・研修のご相談は研修・導入支援、ECの自動化はEC運用自動化、AI検索対策はAIO対策へ。
