Upgrade to Pro — share decks privately, control downloads, hide ads and more …

プロンプトの良し悪しを、数値で判断してみた

Sponsored · SiteGround - Reliable hosting with speed, security, and support you can count on. →
komatsuna
September 17, 2026

 プロンプトの良し悪しを、数値で判断してみた

JaSST Niigata 2026 LT

komatsuna

September 17, 2026

Transcript

6 slides
  1. 比較結果 同じ仕様書で、 4つのプロンプト候補を比較 案A・案Bは「観点数を旧プロンプトと同じ7個に揃えてほしい」という要望に応えて追加で作った 2パターン 観点数 一致率 トレース可能 生成されたテス トケースの総数

    旧プロンプト 7 44% 0/20 76 ✓ 新プロンプト+粒度ガード 15 55% 10/20 83 新プロンプト+案 A(観点数アンカー) 7 45% 6/20 57 新プロンプト+案 B(セクション束ね) 7 59% 6/20 61 プロンプト 4件を1つずつ読み比べなくても、数値を並べるだけで違いが見える 04

More Decks by komatsuna

Other Decks in Technology