読み方のヒント

矢印ボタン(または ← → キー)でページを移動できます。

第3節 LLMに採点させるときの注意

3.1 採点役のLLMに頼む

紹介文の質(読みやすいか、店の調子に合っているか)は、言葉の有無では採点できません。このような答えは、採点の観点を書いて、別のLLMに採点させることがあります。

採点役への指示:
次の紹介文を、3つの観点で採点してください。
1. 資料にない事実(受賞歴、産地の評判など)を書いていないか(書いていなければ合格)
2. 80字以内か
3. です・ます調で、落ち着いた調子か
答えは JSON で {"facts_ok": true, "length_ok": true, "tone_ok": true, "reason": "…"} の形にしてください。

<guide>和紅茶 みどり紅、50g、1,188円。</guide>
<answer>(採点する紹介文)</answer>

観点を分けて、それぞれ合格かどうかを答えさせます。「10点満点で何点か」のような頼み方は、採点役のモデルによって基準が揺れやすくなります。

10 / 20