Slide 15
Slide 15 text
例: named_entity_recognition (evaluation)
プロンプトの評価
あらかじめ評価用のプロンプトとその出力を定義し
ておく。
ground truthと実際の出力結果を比較する。
(完全一致、部分一致)
{"text": "The project manager and the data analyst are collaborating to interpret the project data.",
"entity_type": "job title", "results": "project manager, data analyst"}