相見積もりの見積書3社をAIで比較表にする精度検証

検証方法

当社で、会社案内パンフレット（A4・8ページ・1,000部）の架空の見積書を3社分作りました。会社名は A社・B社・C社 とし、実在の会社とは関係ありません。

見出しの額をそのまま並べると、A社363,000円（税込）・B社330,000円（税込）・C社294,500円（消費税別）で、C社だけ税抜です。税込でそろえると、A社363,000円・B社330,000円・C社323,950円になります。さらに、B社は撮影を含まず、C社は配送料が別途なので、総額は同じ内容の比較ではありません。有効期限はC社に、納期はB社に、校正の回数はB社・C社に、用紙はA社・B社に書いていません。

答えを知らないClaude（Opus 5.5・Haiku 4.5）に、画像3枚と依頼文だけを渡しました（各条件1回）。依頼文は、下のプロンプトを渡した条件と、「この3社の見積書を比較表にしてください。」とだけ頼んだ条件の2つです。採点は、税込の総額・税抜の総額・値引き2件・B社の撮影が含まれないこと・C社の配送料が別途であること・A社の校正の追加料金・書いていない項目を埋めないこと、の7項目です。

結果：税込・税抜のそろえ方と別途費用の拾い方

回答の原文と採点は、架空の見積書・正解表と一緒に保存しています。

わかったこと

• ただ頼んだHaiku 4.5は、税込の額を税抜の欄に入れた。B社の見積書には「内訳（金額はすべて税込です）」と書いてありますが、回答は330,000円を「小計（税抜）」と「割引後（税抜）」の両方に入れ、C社の税込は324,150円と計算しました。そのうえで「最安値：C社（消費税込み324,150円）」と書いています。
• 税込・税抜のそろえ方を決めたプロンプトでは、Haiku 4.5も総額を正しくそろえた。「総額は税抜と税込の両方をそろえて出す」「計算した額には「（計算）」と付ける」と決めた条件では、B社の税抜300,000円・C社の税込323,950円を正しく出しました。ただし、B社の税抜300,000円には「（計算）」の印が無く、内訳の行ではB社だけ税込の額を断りなく並べ、A社の金額表示を「税込」としていました。
• 別途の費用は、4条件とも拾った。B社の撮影が含まれないこと、C社の配送料が実費で別途であること、A社の校正3回目以降の追加料金（1回10,000円・税抜）は、どの条件の回答にもありました。
• 書いていない項目を、推測で埋めた回答は無かった。C社の有効期限、B社の納期、B社・C社の校正の回数、A社・B社の用紙は、4条件とも「記載なし」とするか、触れていませんでした。
• Opus 5.5は、ただ頼んでも同じ内容の比較ではないことを書き添えた。「税込の総額はC社がいちばん安く見えますが、配送料が入っていません。B社は撮影が入っていません。」と書き、各社に確かめることを並べました。

添付した3社の見積書を、次の決まりで比較表にしてください。
1. 会社ごとに、見積書の金額が税込表示か税抜表示かを書く
2. 総額は税抜と税込の両方をそろえて出す。見積書に書いていない方は、税抜×1.1 または 税込÷1.1 で計算し、計算した額には「（計算）」と付ける
3. 値引きがあれば、値引き前の額と値引きの額も書く
4. 内訳の項目（デザイン・撮影・印刷・配送など）ごとに、含まれるか・いくらかを並べる
5. 見積もりに含まれない費用（別途・実費・追加料金）を1つの行にまとめる
6. 有効期限・納期・校正の回数・用紙は、見積書に書いてあるとおりに写し、書いていないものは「記載なし」とする。推測で埋めない
7. どの会社を選ぶべきかは書かない

まとめ

様式の違う3社の見積書を比較表にさせると、別途の費用は4条件とも拾い、書いていない項目を推測で埋めた回答もありませんでした。差が出たのは税込と税抜のそろえ方で、ただ頼んだHaiku 4.5は税込の額を税抜の欄に入れ、消費税別の見積書の税込額を計算違いしました。比較表を作らせるときは、税込・税抜の表示と、計算した額の印、別途の費用の行を決めたプロンプトにし、総額は見積書の数字と見比べてください。見積書そのものの計算の誤りを見つける方法は、見積書の計算ミスをAIで検出する検証にまとめています。