読み方のヒント

矢印ボタン(または ← → キー)でページを移動できます。

第3節 呼び合うループ

3.3 道具を呼ばずに答えたとき

このPCで「メロンパンを5個買いたいけど足りますか」と聞くと、LLMは道具を1つも呼ばずに、次の文を返しました。

はい、メロンパンの残り数は5つです。購入できます。

残りの数を調べていないのに、数を答えています。メロンパンの残りは8個なので、「購入できます」は結果として合っていますが、「残り数は5つ」は根拠のない数です。

ループに、一度も道具を使っていないのに文章が返ったら、答えとして使わずに頼み直す処理を加えました。

NUDGE = "答える前に、道具で調べてください。"

        if not calls and not result.steps:
            # 一度も調べずに答えようとしたら、答えとして使わず、調べるよう頼み直す
            messages.append({"role": "user", "content": NUDGE})
            continue

頼み直したあと、LLMは find_products を呼び、結果をもとに答えました。頼み直しもLLMを呼ぶ1回として数えるため、回数の上限は変わらずに効きます。

解答例

あいさつにも「道具で調べてください」と頼み直したため、LLMは何かを調べようとして、パンを探しました。道具が要らない質問もあるので、すべての質問に道具を求めるのは行き過ぎです。質問の種類を先に決め、道具が要る質問にだけこの処理を使う形が考えられます(「AIエージェント 処理を段階に分ける」で扱います)。

12 / 22