プロンプトの評価とは
プロンプトの評価は、正確さ・網羅性・形式の遵守・トーンなど、業務ごとに決めた基準で出力を採点する工程です。同じプロンプトを複数回試して揺れも確認します。
失敗した出力を「なぜ違うか」まで言葉にして制約として追加するのが改善の定石です。質問と正解の組(評価データ)を用意すると、変更の効果を比較できます。
出力を決めた基準で採点し、プロンプトを改善する手順。基準が無いと改善できない。
プロンプトの評価は、正確さ・網羅性・形式の遵守・トーンなど、業務ごとに決めた基準で出力を採点する工程です。同じプロンプトを複数回試して揺れも確認します。
失敗した出力を「なぜ違うか」まで言葉にして制約として追加するのが改善の定石です。質問と正解の組(評価データ)を用意すると、変更の効果を比較できます。