メルマガのABテスト、何通送れば結果が出るか｜必要な配信数の目安

メルマガのABテスト、「A案とB案を1回ずつ送って、よかったほうを採用」で終わっていませんか？

開封率が少し高かったほうを勝ちにして、次の配信に進む。そんな回し方をしている方も多いのではないでしょうか。

ムジンも、最初はそのくらいの感覚でいました。

ところが、必要な本数をきちんと計算してみて、手が止まりました。想像していたより、ずっと多かったからです。

しかも各社から届くメールを見ると、ほとんどの会社が毎回ほぼ同じ作りで送っていて、そもそも比べる材料がありませんでした。

そこで、BtoBのマーケティング・営業支援の分野を中心に、247社から届いたセミナー集客メール5,173通を数え、ABテストに必要な本数を計算で確かめました。何本送ればいいのか、何を変えればいいのか、順番に見ていきます。

ABテストって、2つの案を1回ずつ送れば分かるんじゃないんですか？

1回では分かりません。メールの反応は、件名以外の理由でも大きく揺れるからです。

じゃあ、何本くらい送ればいいんですか？

揺れが平均の4割なら、3割の差を見るのに両案で56本です。

最初に、この記事で使う物差しを説明させてください。

メールの反応は「月内指数」で比べると分かりやすくなります。同じ月に送ったメールの平均を100としたとき、120なら2割よく押された、という数字です。

月によって反応の水準は上下します。こうしてそろえないと、月をまたいだ比較ができません。

1本ごとの揺れは、件名以外からも来る

そろえた指数でも、1本ごとの揺れは残ります。

揺れの理由は、件名だけではありません。セミナーのテーマの人気、登壇者、送った週の忙しさでも上下します。

たとえば揺れ（標準偏差）が40の会社なら、およそ3分の2のメールが60から140の間に散らばります。

3本の平均を取っても、ぶれは23ほどしか縮みません。40を、本数3の平方根で割った値です。

新しい件名で3回送って指数120でも、それが件名のおかげとは言い切れません。

そもそも、比べる相手がいない

もう1つ意外だったのが、各社のメールの作りがほとんど変わらないことです。

2026年7月6日から10月26日までに、247社から届いたセミナー集客メール5,173通を数えました。このうち10通以上届いた125社について、本文の作りを見ています。

本文の作りは「冒頭にバナー、ボタン2回」「画像なしの手紙」のように、画像とボタンの置き方で5つに分けました。

次の図は、各社でいちばん多い作りが、その会社のメールの何割を占めるかを数えたものです。

いちばん多い作りが占める割合は、中央値で87%でした。125社のうち73社は8割以上が同じ作りで、27社は全通が同じ作りです。

ここまでそろっているとは、思っていませんでした。

同じ作りしか送っていなければ、何年続けても作りの良し悪しは比べられません。

件名のほうは、いちばん多い型が占める割合の中央値が47%です。件名は毎回少しずつ変わっていても、何を変えたのかは記録されていないことが多いはずです。

計画が要るのは分かりました。本数は、とりあえず100本とかですか？

勘では決めません。過去の揺れと、見分けたい差から計算します。

計算って聞くと、ちょっと身構えちゃいますね。

材料は3つだけです。次の章で、実際に当てはめてみます。

では、何本送ればいいのか。

使う材料は、過去の配信の揺れ、見分けたい差の大きさ、判定の厳しさの3つです。

判定の厳しさは、よく使われる設定に合わせました。偶然を差と見誤る確率を5%、本当にある差を見逃さない確率を80%に置きます。

揺れ40の会社に当てはめてみます。次の図を見てください。

両方の案を合わせた本数は、次のとおりです。

• 差50を見分けるなら、22本です。
• 差40なら、32本です。
• 差30なら、56本です。
• 差20なら、126本です。

差を小さくするほど、本数は一気に増えていきます。見分けたい差を半分にすると、必要な本数はおよそ4倍です。

月4通の会社だと、56本は1年以上先

ここで、各社から届いたメールのデータに戻ります。

8月と9月にセミナー集客メールが届いた169社で、1か月あたりの通数を数えました。次の図を見てください。

中央値は4通で、半分の85社が月4通以下でした。

月4通のペースだと、56本たまるまでに14か月かかります。

その間に、商材も読者の顔ぶれも変わってしまいます。配信を重ねて本数をためるやり方は、多くの会社にとって現実的ではありません。

始める前に、決めておくこと

本数の見積もりで迷わないように、次の4つを先に決めておくのがおすすめです。

• 見分けたい差は、過去に出た差の大きさを目安に置きます。
• 揺れは、配信リストごとに計算し直します。
• 見積もりが3か月を超えるテストは、2分割配信に切り替えるか保留にします。
• 何で判定するかと見分けたい差は、始める前に書き残します。

途中経過で判定しないのも、大事な決まりです。良さそうな数字が出たところで止めると、偶然の上振れを拾いやすくなるからです。

本数に届いて差がなかったときも、「効かない」とは書きません。「この本数で見分けられる差より小さい」と書いておくと、あとで読み違えずに済みます。

配信が月数本なら、1回を2つに分ける

では、月数本の会社はどうすればいいのか。

1回の配信を宛先で2つに分けて、A案とB案を同時に送る方法があります。同じ日に同じリストへ送るので、企画や時期の違いも混ざりません。

開封は数が大きいので、少ない回数で差が見えます。たとえば開封率35%と40%の差なら、片方に約1,470件ずつ届けば見分けられます。宛先3,000件のリストなら、1回の配信で足りる計算です。

一方、クリックは数が少なくなります。クリック率1.0%と1.5%の差を見るには、片方に約7,750件ずつ必要です。宛先3,000件だと、6回分の配信を足し合わせることになります。

開封とクリックでは、必要な宛先の数が5倍以上違うのが分かります。

配信が少ない会社は、まず件名に絞って開封率で比べるのが近道です。

開封率を使うときは、Appleのメールアプリの仕組みに気をつけてください。受信した時点で開封と数えさせる、プライバシー保護機能があります。この分が両案に同じように混ざっているかを、始める前に確かめておきましょう。

本数は分かりました。で、何を変えればいいんですか？

1回に変えるのは1か所だけです。どこを変えるかは、受信箱の混み具合も見て選びます。

全部いっぺんに変えたほうが、早く良くなりそうですけど。

それだと良くなっても、何が効いたのか分かりません。

たとえば件名とボタンを同時に変えて反応が上がっても、どちらのおかげかは区別できません。

そこでムジンは、1通のメールを7つの部品に分けて見ています。

1. 件名の型（テーマ提示型、事例企業型、事務連絡型、問いかけ型など）
2. プレヘッダー（受信一覧で件名の横に出る一文）
3. 書き出し（挨拶から入るか、いきなり本題か）
4. 本文の並び（画像・文章・ボタンの順番）
5. 申込ボタン（数、ボタンかリンクか、最初の位置）
6. バナーや画像（有無と位置）
7. 送るタイミング（何通目か、開催の何日前か、曜日と時刻）

このうち件名の型を8つ、本文の作りを5つに分けると、受信したセミナー集客メール5,173通には40通りの組み合わせが出てきました。この組み合わせを「型」と呼んでいます。

ABテストでは型を固定し、7部品のうち1つだけを入れ替えます。次の図を見てください。

動かすのは、1つのリストにつき1部品ずつです。 同時に2本走らせると、1本あたりの本数が半分になり、どちらも判定に要る本数まで届きません。

候補は「受信箱で空いている型」から選ぶ

どの部品から試すか。ムジンは、受信箱で多い作りに寄せないことを基準の1つにしています。

5,173通のうち、テーマをそのまま示す「テーマ提示型」の件名は46.1%でした。本文は「冒頭にバナー、ボタン2回」の作りが63.5%です。

一方、思い込みをひっくり返す「常識転換型」の件名は4.1%、画像を使わない手紙のような作りは7.0%でした。次の図で、赤が受信箱で1割に届かない型です。

多い作りは「よく使われている」だけで、効いている証拠にはなりません。みんな同じ件名なら、寄せるほど受信一覧で埋もれやすくなります。

そのため、空いている型は試す価値のある候補になります。効くかどうかは、自社のABテストで確かめます。

過去の比較だけでは、結論にしない

自社の過去の配信を型ごとに並べると、差が見えることがあります。つい飛びつきたくなりますが、それだけでは結論になりません。

たとえば登壇企業名を出す件名は、企業名を出せる企画でしか使えません。型の差に、企画の強さが混ざってしまいます。

過去のデータは候補選びに使い、結論はABテストで出します。

▼BtoBメルマガ2,447通の件名や配信時間の傾向は、こちらの記事で詳しく書いています

BtoBメルマガ2,447通を全件調査｜件名・配信時間・文字数・ボタンの実態

候補が決まったら、あとは担当者がA案とB案を選んで送るだけですよね？

そこが落とし穴です。人が選ぶと、テストが崩れます。

崩れるって、大げさじゃないですか？

気づかないうちに偏るんです。次の章で、よくある崩れ方を見ていきます。

テストの計画を立てても、A案とB案の割り振りで崩れることがあります。

選ぶ人の判断が、結果に混ざる

よくあるのが、「この企画は登壇企業が強いから、事例企業型で」と選んでしまうことです。

すると、強い企画ばかりが片方に集まります。型の差なのか企画の差なのか、分からなくなります。

「今どちらが少ないか」を数えて割り振る方法も、思ったより崩れます。複数の担当者が並行して作ると、それぞれが別々に数えて偏るからです。

割り振りは、人が判断しない仕組みにするのがいちばん確実です。

番号の偶数・奇数だけで決める

ムジンでは、配信1本ごとに付く管理番号の偶数・奇数だけで、A案かB案かを決めています。

数えないので、並行して作業しても偏りません。結果は配信の記録に「使った型」「テスト群」として残します。

比べるのは、条件のそろったメールどうし

集計のときは、比べる相手もそろえます。同じ配信リストどうし、同じ通目どうしで比べます。

セミナー集客メール5,173通のうち、件名に「本日」か「明日」が入っていたのは21.2%でした。同じセミナーを前日や当日に送り直す会社が、少なくありません。

初報と当日のリマインドを混ぜると、タイミングの差が型の差に見えてしまいます。オンライン開催と会場開催も、分けて集計しましょう。

片方の案が5本未満のうちは、結論にしません。

もう1つ、クリックで勝っても申込で負けている案は採用しません。件名が「押させるだけ」になっているかもしれないからです。

ここまでの話を、始める順に並べ直しました。上から順に進めてみてください。

1. 過去の配信のクリック率を、その月の平均で割って指数にします。
2. 指数の揺れ（標準偏差）を出します。
3. 見分けたい差を決め、揺れから必要な本数を逆算します。
4. 見積もりが3か月を超えるなら、2分割配信か別のテストに切り替えます。
5. 何で判定するかと見分けたい差を、始める前に書き残します。
6. 型を固定し、変える部品を1つだけにします。1つのリストで走らせるテストも1本にします。
7. A案とB案は、番号の偶数・奇数など人が選ばない方法で割り振ります。
8. 配信の記録に「使った型」と「テスト群」を残します。
9. 同じ配信リスト・同じ通目・同じ開催形式どうしで集計し、申込数でも確かめます。

判定が出たら、勝った作りを文面のテンプレートに戻します。

決まりとして入れるときは、本数・差・判定に使った指標も一緒に残しておきます。半年後や、配信リストの中身が大きく変わったときに見直すためです。

配信の数字から見えた傾向は、すぐにはテンプレートに入れません。ABテストの候補に回し、判定が出たものだけを入れる。この順番を守ると、思い込みの規則が増えずに済みます。

メルマガのABテストは何本送れば結果が分かりますか？

揺れ（標準偏差）が40なら、差30を見分けるのに両案合わせて56本が必要です。差50なら22本で足ります。必要な本数は会社ごとの揺れで変わるので、過去の配信から標準偏差を出して逆算してください。

最初は何を変えればいいですか？

件名の型から始めるのがおすすめです。本文を作り直す手間が少なく、2分割配信なら開封率で比べられます。5,173通の46.1%を占めるテーマ提示型から、空いている型へ1か所だけ変えるところから始めます。

開封率とクリック率、どちらで判定すべきですか？

配信本数が多い会社はクリック率、月数本の会社は開封率が現実的です。開封率35%と40%の差なら、片方に約1,470件ずつで見分けられます。クリック率1.0%と1.5%の差には、片方に約7,750件ずつ必要です。

今回いちばん大きかった発見は、ほとんどの会社が毎回同じ作りでメールを送っていたことです。比べる相手がいなければ、どれだけ送っても「何が効くか」は分かりません。

最後に、要点をもう一度だけ並べます。

• 揺れが40なら、差30を見分けるには両案で56本が必要です。
• 変える部品は1つだけにし、A案とB案は番号の偶奇で決めます。
• 配信が月数本なら、1回を2分割して開封率で比べます。

まずは過去の配信を月の平均で割って、揺れを1つの数字にしてみてください。自社のテストに何本要るのかが、そこから見えてきます。

ムジンでは、メルマガの型の整理から、必要な本数の見積もり、ABテストの割り振りと判定までを仕組みにして配信を代行しています。何から試せばよいか知りたい方は、メルマガ配信の支援サービスをご覧ください。

調査の方法

• 対象は、BtoBのマーケティング・営業支援の分野を中心に、2026年7月6日から10月26日までに届いたメルマガ9,155通のうち、セミナー集客メール5,173通（247社）です。
• 件名の型は8つ、本文の作りは画像とボタンの置き方で5つに分け、同じルールで1通ずつ判定しました。
• 1社あたりの作りの偏りは、10通以上届いた125社で数えました。月あたりの通数は、8月と9月に1通以上届いた169社で数えました。
• 必要な本数は、偶然を差と見誤る確率5%、差を見逃さない確率80%、両案同数として計算しました。揺れ40、宛先の件数、開封率とクリック率の値は、計算のための例です。
• 全体の傾向を見るための集計で、差出企業の社名や件名・本文の実物は掲載していません。