AIエージェントの実行履歴｜過去の対応を調べる記録と再実行の違い
AIエージェントの過去の対応を調べるには、再実行だけでは不十分です。AIコールの配送案内を仮想例に、当時の記録・現在の照会・検証結果を分け、原因を決めつけず調査する手順を解説します。
「昨日、AIコールが案内した内容が違っていた」と連絡が来たとき、同じ質問をもう一度AIへ渡すだけで原因を特定できるでしょうか。現在の回答が正しくても、昨日の対応が正しかったことにはなりません。調査では、当時の記録と、今試した結果を分ける必要があります。
2026年10月13日、Agentic AI Foundation（AAIF）は、AIエージェントの実行を再現する際の課題を解説しました。当時の経過を記録から調べること、保存済みの結果を使う再生、現在の環境での再実行は異なると整理しています。モデルだけでなく、参照した情報や外部サービスの状態も変わり得るためです。これは解説記事の公開日であり、新製品の提供開始を伝えるものではありません。AAIF公式解説
この視点を企業の問い合わせ対応に当てはめると、「今は正しい回答が出る」で調査を終えず、過去の案内を説明するための材料をそろえられます。以下はIvyLeapの実務提案です。配送案内の場面や時刻は説明用の仮想例で、当社の導入事例ではありません。
配送案内の食い違いを、四つの問いに分ける
仮に、昨日15時の電話ではAIが「本日発送予定です」と案内した一方、翌朝の問い合わせでは商品が未発送だったとします。この時点でAIの誤回答とも、配送システムの不具合とも断定できません。
最初に調べる問いは次の四つです。
- 電話をかけた人は、どの商品・注文について尋ねていたか。
- AIは、どの注文を配送システムへ照会したか。
- 照会先は、その時点で何を返したか。
- AIは、その結果をどのような言葉で案内したか。
例えば照会結果が「発送予定」なのに、案内音声が「発送済み」なら、状態の言い換えを調べます。違う注文を照会していたなら、対象の特定を調べます。正しい予定を案内した後に出荷が遅れたなら、予定変更の連絡方法が確認事項になります。同じ「案内と現状が違う」という申し出でも、改善する場所は異なります。
調査メモには「いつ得た情報か」を書く
この仮想例では、次のように調査メモを分けます。担当者が一枚のメモに追記する場合も、区分を混ぜないことがポイントです。
- 当時の記録：昨日15時の照会対象、照会応答、実際に流した案内。
- 現在の確認：本日9時に担当者が開いた配送状況。
- 検証で得た結果：検証用の注文で、現在のAIへ同じ用件を入力した結果。
- まだ不明なこと：照会応答の保存がなく、昨日の状態を確認できない部分。
「発送予定」という同じ文言でも、昨日の応答に残っているのか、今日調べて分かったのかで意味が変わります。過去の記録が欠けている場合は、その空欄を現在の照会値で埋めず、「当時の値は未確認」と書きます。
また、通話の文字起こしだけを根拠にすると、音声認識の誤りをAIの発言と取り違える可能性があります。利用可能な記録の範囲で、案内用テキスト、音声、文字起こしのどれを確認したかも明記しましょう。
開発担当には「一件をたどれるか」を確認する
OpenTelemetryの公式解説では、AIの呼び出しに関するモデル名・所要時間などと、会話やツールの引数・結果といった詳細内容を区別しています。紹介されている設定例では、機密情報を含み得る詳細内容の取得は初期状態で無効です。「監視ツールを入れた」だけで、過去の回答内容まで必ず残るわけではありません。OpenTelemetry公式解説
配送案内の調査を想定した打ち合わせでは、製品名を聞くだけでなく、次の作業を開発担当と試してみてください。
まず、検証用の電話一件を選びます。その受付番号から、注文の照会記録と案内記録へたどれるかを確認します。照会が途中でやり直されている場合は、どの応答が案内に使われたかも確かめます。記録を順番に並べた際に、別の通話の応答が紛れ込まないことが確認点です。
受付番号が電話側にしかなく、照会側は時刻だけで探す構成なら、同時に電話が来た場面で区別できるかを試します。この一件の追跡で見つかった不足を、次の改善項目にします。最初から全データを保存する設計に広げる必要はありません。
再実行する前に、調べたい仮説を一つ決める
当時の経過を整理した後、検証で確かめる内容を絞ります。例えば「発送予定を発送済みと言い換えるか」を調べるなら、検証用の照会結果を固定し、案内文を比べます。「注文番号の聞き取りを誤ったか」を調べるなら、対象の確認会話を重点的に見ます。
検証記録には、何を固定し、何を変えたかを書きます。現在のモデルや設定で試した結果は、現在の改善確認には使えても、当時の実行そのものを証明するものではありません。再現しなかった場合も「原因なし」ではなく、「今回の条件では発生せず」と記録します。
調査のために本番の電話発信や顧客通知まで再実行しないよう、実行先も先に確認します。検証環境の分け方はAIエージェントの検証環境で解説しています。
調査の結論と、利用者への対応を分けて残す
社内の調査メモの末尾には、「確認できた事実」「未確認の部分」「次に試すこと」「お客様への対応」を分けて書くと、担当交代時にも状況を共有しやすくなります。
原因調査が終わっていなくても、現在の配送状況を担当者が確認して案内するなど、利用者への対応を先に進められる場合があります。その際は、推測した原因を確定事項として説明せず、確認できた範囲を伝えます。
調査に使う記録は、閲覧できる担当者、保存期間、共有時に伏せる項目を決めて扱います。社外への問い合わせ資料には必要な箇所だけを抜き出し、顧客の会話全体や認証情報をそのまま添付しない運用にします。
日常の異常通知や停止手順はAIエージェントの運用監視、個別業務の記録設計を含む導入の相談はAIエージェント構築支援をご覧ください。IvyLeapへお問い合わせいただく際は、調査したい業務と、現在残している記録をお知らせください。
※出典は2026年10月15日に確認。記録できる項目や再実行の動作は、利用する製品・設定によって異なります。