メルマガ・SNSの告知文をAIに書かせる精度検証
キャンペーンの期間・割引・条件と臨時休業の日付を取り違えないかを確認
検証方法
当社で架空の雑貨店「ことり堂」のメモを2つ作りました。店名・日付・金額はすべて架空で、実在の店とは関係ありません。メモには、告知文で落としたり混ぜたりしやすい点を入れてあります。
- キャンペーン告知:会員の先行販売(11月5日の1日だけ)と、一般向けの期間(11月6日から15日)を分けた。割引の対象外(雪華シリーズ)、クーポンの併用不可、送料無料の条件(期間中は税込5,000円以上、通常は8,000円以上)を入れた。数量限定にするかは「未定」とし、ラッピングは「特別な割引や無料はない」とした。
- 営業日のお知らせ:臨時休業は11月23日の1日だけ。翌24日は12時開店(通常は10時)で閉店は18時のまま。ネットショップは休業日も注文を受け付け、発送は25日から。電話は休業日は受け付けず、メールの返信は24日以降。お詫びの割引やポイントは予定していない。
メモは次のとおりです。
【キャンペーン告知のメモ(ネットショップ担当・小川)】 ・店名:雑貨店「ことり堂」(架空)/配信先:メルマガ会員とネットショップの購入者 ・キャンペーン名:秋の感謝セール ・期間:2026年11月6日(金)から11月15日(日)まで ・会員限定の先行販売:11月5日(木)の1日だけ。会員のみ。一般のお客様は11月6日から ・割引:食器の全品が通常価格の20%オフ ・対象外:作家ものの「雪華シリーズ」は割引しない ・クーポン:他のクーポンとの併用はできない ・送料:期間中は税込5,000円以上で無料(通常は税込8,000円以上) ・実店舗:実店舗でも同じ割引 ・数量限定にするかどうか:未定 ・ラッピング:今回は特別な割引や無料はない
【営業日のお知らせのメモ(店長・小川)】 ・店名:雑貨店「ことり堂」(架空)/載せる先:店のSNSアカウント(短い投稿文) ・臨時休業日:2026年11月23日(月・祝)の1日だけ。理由は棚卸し ・翌日の営業:11月24日(火)は通常より遅く、12時に開店。閉店は通常どおり18時 ・通常の営業時間:10時から18時 ・ネットショップ:休業日も注文は受け付ける。発送は11月25日(水)から順次。23日・24日の発送はしない ・電話:休業日は受け付けない。メールの返信は11月24日(火)以降 ・ほかの休業日:今回の変更はこの1日だけ ・お詫びの割引やポイント:予定していない
答えを知らないClaude(Opus 5.5・Haiku 4.5)に、ツールを使わせず、メモと依頼文だけを渡しました。依頼文は2通りで、「メモから告知文を書いてください」だけの場合と、下のプロンプト(日付・金額を変えない、メモに無い割引や効果を足さない、条件は省かない、未定は断定しない)を付けた場合です。採点は、メモと一緒に先に作った正解表の8項目(題材ごと)の○×と、メモに無い割引・効果・条件の書き足しの数です。回答の原文は docs/tests/2026-10-14-kokuchi/ に保存しています。
結果:キャンペーン告知(メルマガ)
| 条件 | 8項目 | メモに無い割引・効果・条件の書き足し | そのほか |
|---|---|---|---|
| Opus 5.5・依頼文は書くだけ | 8 / 8 | 0か所(境界1: 「ラッピングは通常どおりの扱いです」) | 本文のあとに確認点を3つ書いた(数量限定は未定なので書かなかった、送料の条件が11月5日の先行販売にも当てはまるか、実店舗でも先行販売を行うか) |
| Haiku 4.5・依頼文は書くだけ | 8 / 8 | 0か所 | 本文のあとに「数量限定にするかは未定のため、本文には入れていません」と注記 |
| Opus 5.5・ルール4つつき | 8 / 8 | 0か所 | 注記なし。本文だけを返した |
| Haiku 4.5・ルール4つつき | 8 / 8 | 0か所 | 本文のあとに確認事項を3つ書いた(数量限定は未定なので書かなかった、メモの「(架空)」を見て店名の扱いの確認、先行販売が送料条件にも適用されるかはメモに無いので書かなかった) |
結果:営業日のお知らせ(SNS)
| 条件 | 8項目 | メモに無い割引・効果・条件の書き足し | そのほか |
|---|---|---|---|
| Opus 5.5・依頼文は書くだけ | 8 / 8 | 0か所 | 「今回お休みするのはこの1日だけです」と休業日に限って書いた |
| Haiku 4.5・依頼文は書くだけ | 8 / 8 | 0か所 | 「今回の変更は11月23日の1日だけで、ほかの日の営業時間は通常どおりです(10時〜18時)」と書いた。24日は12時開店なので、この一文は食い違う |
| Opus 5.5・ルール4つつき | 8 / 8 | 0か所 | 「今回の臨時休業はこの1日だけです」と休業日に限って書いた |
| Haiku 4.5・ルール4つつき | 8 / 8 | 0か所 | 「今回の変更は11月23日の1日だけです」と書いた。24日の12時開店も変更なので、読み方によっては食い違う |
わかったこと
- 8項目は8回とも満点だった。期間・曜日、割引率、対象外、併用不可、送料の条件、休業日、翌日の開店時刻、発送日を取り違えた回はありませんでした。
- メモに無い割引・特典・効果・数量限定の書き足しは、8回とも見つからなかった。依頼文が「書くだけ」の場合も同じで、メモで「未定」とした数量限定を書いた回はありません。
- 差が出たのは、本文の外と、言い回しの細部だった。キャンペーンでは4回中3回が、本文のあとに注記や確認点を添えました(うち1回は、数量限定は未定なので書かなかったという注記1つ)。営業日のお知らせでは、Haiku 4.5の2回が「今回の変更は11月23日の1日だけ」と書き、うち「書くだけ」の回は「ほかの日の営業時間は通常どおり」とまで書いたため、24日の12時開店と食い違います。メモの「ほかの休業日:今回の変更はこの1日だけ」は休業日の話でした。
- ルール4つの効果は、この検証では測れなかった。ルールなしでも満点で、書き足しも0だったためです。
告知文のプロンプト
次のメモから、お客様に送る告知文(メルマガ本文またはSNSの投稿文)を書いてください。 ルール: 1. 日付・曜日・時刻・金額・割合は、メモにあるものだけを使い、変えない。 2. メモに無い割引・特典・効果・評判・数量限定・お詫びの埋め合わせなどを書き足さない。 3. 対象外・併用不可・先行販売・休業日・発送や問い合わせの扱いなど、条件は省かずに書く。 4. 未定のことは断定せず、書かない。
検証で使った文面は、キャンペーンと営業日のお知らせで言葉が少し違います(メルマガ・SNSの別、先行販売・対象外の条件か休業日・発送の扱いか)。上の文面は、その両方に使えるよう言葉を合わせたものです。
使うときのコツ
- 「変更は○○だけ」「ほかは通常どおり」の一文は、自分で確かめる。今回の食い違いは、休業日の話を営業時間の話に広げた一文でした。
- 数字と日付は、メモと見比べてから送る。今回は8回とも正確でしたが、各条件1回の結果です。
- 本文の外の確認点も読む。送料の条件が先行販売の日に当てはまるかなど、メモに無いことをAIが自分から挙げた回がありました。送る前に決めておく項目になります。
まとめ
架空の雑貨店のキャンペーン告知と臨時休業のお知らせでは、Opus 5.5・Haiku 4.5ともに、期間・割引率・条件・休業日・発送日を取り違えず、メモに無い割引や数量限定を書き足しませんでした。注意が要ったのは、Haiku 4.5が2回書いた「今回の変更は11月23日の1日だけ」のような、メモの一部を広げた一文です。差がつく条件は、メモが長い場合や、条件が互いに食い違う場合など、今回より難しい設定で探す必要があります。告知文は、日付・金額・「ほかは通常どおり」の一文をメモと見比べてから送ってください。
よくある質問
キャンペーンの告知文を、メモからAIに書かせて大丈夫ですか。
この検証では、Opus 5.5とHaiku 4.5のどちらも、架空のキャンペーン告知のメモから書いた告知文で、期間・割引率・対象外・併用不可・送料の条件を取り違えませんでした。ただし1つのメモ、各条件1回の結果です。送る前に、日付・金額・条件をメモと見比べる作業は残ります。
メモに無い割引や「数量限定」を、AIが書き足すことはありますか。
この検証の8回(キャンペーンと営業日のお知らせ、各4条件)では、メモに無い割引・特典・効果・数量限定を書き足した回はありませんでした。メモで「未定」とした数量限定は、2つのモデルとも本文に書いていません。ただし回数が少なく、別のメモでは起きる可能性があります。
休業のお知らせで、AIが間違えやすいのはどこですか。
この検証では、営業日のお知らせの4回とも、休業日・曜日・開店時刻・発送日は正確でした。Haiku 4.5は2回で「今回の変更は11月23日の1日だけ」と書きました。11月24日の12時開店も通常と違う変更なので、「書くだけ」の回は「ほかの日の営業時間は通常どおり」とまで書いてはっきり食い違い、ルールつきの回は読み方によって食い違って見えます。メモの「ほかの休業日:今回の変更はこの1日だけ」を、営業時間の話にまで広げた書き方でした。
この店は実在しますか。
いいえ。店名・期間・金額・日付はすべて当社が作った架空のデータです。
合同会社フューチャープロンプト(AIプロダクト開発・業務自動化/東京・渋谷)がまとめました。AIの検証は2026年10月14日に行いました。検証の作り方は検証・編集・AI利用方針をご覧ください。