改善のための分析はできますか?
はい。可能です。
TuneAIBot では、回答デバッグ機能を利用して、AIがどのように回答を生成したかを分析できます。
たとえば、
どのFAQが参照されたか
どのナレッジが候補になったか
FAQしきい値を下回ったか
なぜ自由回答へ移行したか
どの段階で判定されたか
などを確認できます。
また、サンドボックスでは、
FAQ候補比較
ナレッジ候補比較
ChatGPTカスタム回答
ChatGPTネイティブ回答
Point match
Times Used
なども確認できるため、改善ポイントを比較的短時間で特定できます。
そのため、
FAQ不足
ナレッジ不足
表現ゆれ
スコア設定
フォールバック条件
などを継続的に調整しながら、精度改善を進められます。
