Webマーケティングにおいて、ABテストは極めて重要です。
とはいえ、それは大手の話であって、必ずしも我々のような小規模ビジネスに当てはまるとは言えません。
今回はかなり物議を醸しそうなテーマですが、僕個人の見解についてお話しします。
- 無料メルマガ:「コンテンツマーケティングマスタークラブ」
- 2ndチャンネル:パワーポッドキャストの作り方
--- Send in a voice message: https://podcasters.spotify.com/pod/show/podcast-apollo/message Support this podcast: https://podcasters.spotify.com/pod/show/podcast-apollo/support
0:00 黒 岩 ビ ジ ネ ス ト ラ ン ス フ ォ ー ム、 ユ ア ラ イ フ ア パ ル オ ヒ ャ ル ポ ッ ト キ ャ ス ト 象 ブ ロ グ 思 考。 こ っ ち ポ ロ で す。 今 日 は 常 ビ ジ ネ ス 初 心 者 に AB テ ス ト は い ら な い と い う 話 を し て い き ま す。 ま あ こ ん な こ と 言 っ た ら ね、 す ご く な ん か 鉱 物 議 を 醸 し そ う な 感 じ な ん で す け ど、 ま あ ウ ェ ブ マ ー ケ テ ィ ン グ と か や っ て る と ね、 こ う エ ー ビ ー テ ス ト っ て い う も の ね え え、 聞 い た こ と あ る と 思 う ん で す け ど、 ま あ、 エ ー パ タ ー ン ビ ー パ タ ー ン で ね、 二 つ あ っ て 試 し て ど っ ち が 反 応 が 出 る か み た い な の を チ ェ ッ ク す る。 こ れ が ま あ、 エ ー ビ ー テ ス ト と 言 わ れ る も の で、 こ の エ ー ビ ー テ ス ト そ の も の は で す ね、 絶 対 に や っ た ほ う が い い な、 間 違 い な い ん で す ね。 例 え ば、 広 告 を 使 っ て 1万 人 集 客 し て 反 応 に 1% 差 が 出 た ね。 1% し か 反 応 率 じ ゃ な か っ た も の が 2% に な っ た 場 合 っ て い う の は、 単 純 計 算 で 百 人 増 え て い る わ け で す ね。 な の で 百 人 で 仮 に じ ゃ あ 単 価 が 1万円 の 商 品 だ っ た ら 百 人 増 え て い る か? 100万円 売 上 が ね 増 え る わ け で す よ。 だ か ら こ の 数 値 で 見 る と す ご く 小 さ い で す ね。 1% し か ア ッ プ し て な い っ て 考 え る と な ん か た っ た 1% か っ て 思 う わ け で す け ど、 そ れ が 実 数 で 考 え る と 百 人 増 え て る っ て 考 え る と ね。 や っ ぱ 売 り 上 げ に 大 き な 差 が 出 る わ け で す。 だ か ら こ そ ね、 そ う い う 小 さ な ね パ ー セ ン テ ー ジ だ っ た と し て も、 エ ー ビ ー テ ス ト っ て い う の や っ た ほ う が い い わ け だ し。 だ か ら、 そ の 点 に 関 し て は 僕 も 全 く 異 論 は な い で す し、 エ ビ テ ス ト そ の も の が 不 要 だ と か ね。
1:31 役 に 立 た な い と か っ て い う の は 全 く 思 わ な い ん で す け ど、 そ れ が こ う 必 要 に な っ て く る と か や っ た ほ う が い い の は、 や っ ぱ り あ る 程 度 の 規 模 の ビ ジ ネ ス に な っ て か ら の 話 な ん で す ね。 ま あ、 さ っ き も 言 っ た み た い に A B テ ス ト で 例 え ば ね、 こ っ ち は 0% だ け ど、 こ っ ち は 50% み た い な。 そ れ ぐ ら い 大 き く 差 が 出 る こ と っ て い う の は 基 本 的 に な い わ け で す ね。 エ ビ テ ス ト っ て い う の は こ う マ イ ナ ー チ ェ ン ジ だ か ら、 例 え ば ボ タ ン の 色 を 変 え る と か、 ち ょ っ と 文 言 を 変 え て み る と か ね。 大 幅 に が ら り と 変 え る み た い な パ タ ー ン も 時 に は あ り ま す け ど、 そ ん な に 大 き く 全 く 全 然 反 応 が 違 う み た い な 差 が 出 る こ と は な い わ け で す ね。 ほ ん と 数 パ ー セ ン ト の 世 界 だ っ た り と か す る ん で で、 そ れ が や っ ぱ り そ の 母 数 が 大 き け れ ば で す ね。 さ っ き 言 っ た み た い に 大 き な 差 が 出 る わ け で す ね。 た っ た 1% か も し れ な い け ど、 何 百 人 と か ね。 何 千 人 の 差 が 出 て く る。 で も じ ゃ あ、 我 々 の よ う な 小 さ い 規 模 で や っ て い る よ う な ビ ジ ネ ス は ど う か っ て い う と。 例 え ば 百 リ ス あ っ て ね。 1% 反 応 は 変 わ っ た ら 一 人 し か 変 わ ら な い わ け じ ゃ な い で す か。 で、 そ の 商 品 が 仮 に 1万円 だ っ た 場 合 に、 ま あ せ い ぜ い 1万円 で す よ。 差 が 出 た と し て も、 じ ゃ あ そ の 1万円 作 る た め に エ イ ビ ー テ ス ト ど れ だ け ね? 時 間 と 労 力 と か、 お 金 を 投 資 し て エ ビ テ ス ト や っ て き た の か っ て こ と を 考 え る と、 そ の 時 間 と か ね 労 力 と か っ て い う の は 別 の こ と に 使 っ た ほ う が、 実 は も っ と 売 り 上 げ が ア ッ プ し た り と か っ て い う 可 能 性 も あ る わ け で す ね。 そ し て も う 一 つ 考 え な い と い け な い の は で す ね。 誤 差 の 範 囲 内 っ て い う も の が。 発 生 す る 存 在 す る っ て こ と で す ね。 だ か ら、 そ の 母 数 が 大 き け れ ば 大 き い ほ ど、 こ の 誤 差 の 範 囲 内 っ て い う の は
3:02 ね 生 ま れ に く く な る わ け で す け ど、 例 え ば 自 分 の ね え え リ ス ト が 50 人 し か い な く て、 で そ こ で こ う A B、 T、 S だ っ て ね。 反 応 が 出 て こ っ ち は ゼロ だ っ た か ら、 こ っ ち は 一 人 で た み た い な 感 じ だ っ た ら。 そ れ は た ま た ま っ て い う こ と も あ る わ け で す よ。 た ま た ま そ の 中 に 反 応 し た 人 が い た だ け で、 そ れ は な ん で そ う い う こ と が 起 こ る か っ て い う と、 そ の 実 数 が 少 な い か ら ね。 母 数 が 少 な い か ら、 た ま た ま そ う い う 反 応 が 出 た だ け で、 次 回 同 じ こ と や っ て も 全 然 ね。 同 じ よ う に な ら な い デ ー タ と し て 参 考 に な ら な い っ て い う の は、 そ も そ も の 母 数 が 少 な い か ら で も 母 数 が 1万 人 と か ね。 5万 人 と か い た ら、 あ る 程 度 や っ ぱ 正 確 な デ ー タ っ て の は 導 き 出 せ る ん で す ね。 そ れ は 母 数 が 多 い か ら 平 均 値 み た い な 感 じ で、 こ う ね な ら さ れ て い く と い う か、 そ う い う の が わ か っ て く る か ら、 ま あ。 不 正 確 な デ ー タ っ て の は 出 に く い わ け で す け ど、 そ も そ も 数 が 少 な け れ ば 正 確 な デ ー タ も 導 き 出 し づ ら い わ け で す よ ね。 な の で、 た ま た ま っ て い う こ と が あ る わ け で す。 A B テ ス ト だ っ た と し て も、 要 す る に 誤 差 の 範 囲 で す ね。 誤 差 の 範 囲 内 で そ の 時 に た ま た ま 反 応 が 出 て、 あ じ ゃ こ っ ち が い い ん だ っ て な っ た と し て も、 そ れ は た ま た ま そ う い う の 時 に そ う な っ た だ け っ て い う 風 に な る と、 そ の 検 証 自 体 が ね 間 違 い だ っ た り と か、 誤 り で あ る 可 能 性 も あ る わ け で す ね。 で あ れ ば、 む し ろ エ ビ テ ス ト を ね や っ た こ と が デ メ リ ッ ト に な っ て し ま っ た り と か っ て い う こ と が あ る ん で。 そ の 置 か れ て い る 状 況 と か ね。 持 っ て い る リ ソ ー ス っ て い う も の が そ も そ も ね 中 小 と か 弱 者 我 々 で す ね。 個 人 規 模 で や っ て い る よ う な 人 と、 ま あ 大 手 の 会 社 と か っ て 違 う わ け で す
4:35 よ ね。 だ か ら そ こ を 本 当 に 真 似 し て や る べ き な の か っ て こ と を、 ま ず 最 初 に 自 分 の 頭 で 考 え る 必 要 が あ る わ け ね。 そ ん な こ と に こ う 時 間 と か お 金 使 っ て た ら ね、 他 の こ と が で き な く な っ ち ゃ う。 我 々 は 全 部 一 人 で や っ て る ん で ね。 一 個 の こ と だ け に、 こ う 時 間 を 全 部 使 う っ て 難 し い わ け で す よ。 大 手 の 会 社 っ て の は 人 材 も い っ ぱ い い る の で、 そ う い う こ と ね。 例 え ば、 こ う ス タ ッ フ を 配 置 し て、 そ の 人 だ け に や っ て も ら う と か っ て い う こ と が ね 可 能 に な り ま す け ど、 我 々 は そ う じ ゃ な い で す ね。 他 に も や ら な い と い け な い こ と は い っ ぱ い あ る わ け だ し っ て な る と、 そ ん な と こ ろ に 時 間 と か ね 使 っ て た ら で、 そ れ で 本 当 に 仮 に 1% 差 が 出 て ね や っ た っ て な っ た と し て も ね。 売 上 ベ ー ス で 考 え た ら 本 当 5000円 と か 1万 し か 変 わ ら な い ん だ っ た ら、 す ご く も う っ た い な い と 思 う ん で す ね。 ま あ そ う い っ た と こ ろ も 考 え て や っ て い か な い と。 こ れ は エ ビ テ ス ト だ け に 限 っ た 話 で は な い と 思 う ん で す け ど、 そ う い う よ う な 形 で 教 わ っ た か ら、 じ ゃ あ そ れ や っ た ほ う が い い ん だ と か っ て い う の は、 ち ょ っ と あ ま り に も 短 絡 的 に と い う か、 思 考 停 止 し て 物 事 を 捉 え て る ん じ ゃ な い か な っ て い う ふ う に 思 う わ け で す ね。 だ っ た ら ね、 た ぶ ん 何 か の ス キ ル を 磨 く と か、 ラ イ テ ィ ン グ ス キ ル 磨 く と か ね。 そ っ ち の 方 が よ っ ぽ ど コ ン バ ー ジ ョ ン 率 が 高 く な っ た り と か ね し た り と か す る ん で す ね。 売 上 も そ っ ち の が ア ッ プ し た り は ね。 人 脈 を 作 る の に こ う 時 間 を 割 い た り と か ね だ っ た り す る わ け で す よ。 自 分 が 何 を す べ き な の か っ て こ と を 考 え る 必 要 あ る し、 本 当 に そ う い う 細 か い ね、 こ う 違 い み た い な テ ス ト っ て い う の は、 ま あ 正 直 わ か ら な い こ と も 多 い ん で す ね。
6:06 僕、 今 ま で そ う い う の、 そ う い っ た こ と っ て い う の は ね、 や っ て こ な か っ た で す し。 薬 局 だ っ て や っ て も 本 当 に 誤 差 の 範 囲 内 だ っ た ら、 ど っ ち が 正 し い の か 正 確 な の か っ て い う の は わ か ら な い の で、 ま あ お い お い ね、 こ う ビ ジ ネ ス の 規 模 が 大 き く な っ て い け ば、 そ う い っ た こ と も や っ た ほ う が い い の か な と は 思 う ん で す け ど、 ま あ、 今 こ う ね、 た く さ ん の こ と を 一 人 で や っ て い る 状 況 で は、 と て も そ ん な と こ ま で 手 が 回 ら な い ん で、 ま あ や っ て い な い と い う こ と で す ね。 な ん で ま あ、 結 局 こ の エ ピ ソ ー ド だ よ ね。 何 を 言 い た か っ た か っ て い う と、 ま あ エ ビ テ ス ト だ け に 限 ら ず で す ね、 本 当 に こ れ っ て 自 分 に と っ て 必 要 な の か な っ て こ と を 自 分 の 頭 で 考 え る 必 要 は あ り ま す よ と い う こ と で す。 起 業 家 っ て い う の は 人 に 言 わ れ た か ら や る み た い な ね。 そ う い う 姿 勢 で は な か な か う ま く い か な い の で、 や っ ぱ り 自 分 の 頭 で 考 え て、 い ろ い ろ 工 夫 し な が ら や っ て い く ね。 こ う 言 わ れ た こ と を た だ ね、 左 京 と し て こ な す だ け で は、 ま あ、 起 業 家 で あ る 意 味 が な い と い う か ね。 そ れ で は や っ ぱ り な か な か。 ビ ジ ネ ス も う ま く い か な い で す し。 そ れ で う ま く い く ん だ っ た ら、 も っ と 簡 単 で も っ と 成 功 す る 人 っ て い っ ぱ い 出 て く る と 思 う ね。 で も、 や っ ぱ り そ う い う。 ま あ、 要 す る に 学 校 の 勉 強 じ ゃ な い ん だ か ら、 答 え は 一 つ じ ゃ な い し ね。 そ の 会 の 導 き 出 し 方 み た い な も の も 人 に よ っ て 違 う わ け で す よ ね。 ま あ ビ ジ ネ ス は 生 き 物 だ し ね。 置 か れ て い る 状 況 と か も 全 然 違 う わ け だ し。 っ て い う ふ う に な る と、 や っ ぱ り 頭 を 使 う 知 恵 を 絞 る と い う こ と が 必 要 に な っ て く る わ け で す。 だ か ら そ う い う の で ね え え 教 わ っ た こ と を そ の ま ま 鵜 呑 み に し て や っ て し ま う っ て い う の は、 ま あ、 あ る 意 味 非 常 に 危 険 か な っ て い う ふ う に 思 う
7:37 ん で、 ま あ そ れ の 最 た る 例 と い う か ね。 が ま あ、 ビ ー テ ス ト な ん じ ゃ な い か な と。 特 に 初 期 の ね。 そ う い う 自 分 が ほ と ん ど リ ス ト が な い 状 態 と か ね。 そ ん な に た く さ ん の 人 を こ う ボ ス を 集 め る こ と が で き な い 状 態 で、 そ れ を 試 し た と こ ろ で、 本 当 に そ の デ ー タ を ね、 正 確 な の か っ て い う こ と た ま た ま だ っ た り、 誤 差 の 範 囲 内 だ っ た と す る と、 そ も そ も デ ー タ と し て 間 違 っ て る 可 能 性 も あ る わ け だ か ら、 だ っ た ら も う 全 く そ こ に 時 間 を。 す る ね 理 由 と か メ リ ッ ト っ て い う の は な い と 思 う ん で す ね。 な の で、 ま あ そ う い っ た こ と を で す ね。 意 識 し て や っ て い く 必 要 が あ る。 ま あ、 も ち ろ ん そ の 少 し で も コ ン バ ー ジ ョ ン 率 を 上 げ る た め に 日 々 工 夫 し て い く っ て い う の は 大 事 だ と は 思 う ん で す け ど、 ま あ、 そ れ と エ ー ビ ー テ ス ト と は ね。 ま た ち ょ っ と 話 が 違 う と か、 ち ょ っ と 反 応 が 出 な い か ら、 こ う い う と こ 変 え て み よ う か な と か ね っ て い う。 そ う い う 意 識 を 持 つ こ と は も ち ろ ん 大 事 な ん で、 そ れ は ね、 や っ た ほ う が い い の は 間 違 い な い ん で す け ど、 え え と B を 比 較 し て、 ど っ ち が 反 応 が い い か な み た い な っ て い う の は ち ょ っ と ね。 あ の ま あ 必 要 な い か な っ て い う ふ う に、 特 に 初 期 の 頃 っ て い う の は 思 う の で、 ま あ あ く ま で も 僕 個 人 の ね、 ま あ 考 え な の で 当 然 こ ん な こ と 言 っ た ら ね、 反 発 と か 生 み そ う な 気 は し ま す け ど、 ま あ そ れ を ね、 受 け 入 れ る か ど う か っ て い う の は、 ま あ 人 そ れ ぞ れ 違 う と 思 う ん で。 ち な み に 僕 は 今 ま で 一 度 も ね。 そ う い っ た A と B の ね え え パ タ ー ン を テ ス ト し て、 ど っ ち が い い の か み た い な こ と っ て い う の は や っ た こ と が な い ん で す ね。 な ん で ま あ、 別 に な く て も 別 に こ こ ま で や っ て こ れ た し、 特 に 必 要 な か っ た の か な っ て い う。 ま あ、 そ の 辺 は こ う 効 率 と か 合 理 性 が 結 構 僕 の 中 で は ね 重 要 視 し て る ん で、 そ こ に や っ ぱ り 時 間 と か ね。 労 力 を 投 資 す る っ て い う の は、 ま あ も
9:09 っ た い な い っ て い う ふ う に 感 じ た ん で、 他 の こ と に じ ゃ あ 時 間 使 お う と い う 形 で や っ て き て、 ま あ な ん と か ね、 現 状 う ま く い っ て い る と か ね。 軌 道 に 乗 る こ と が で き て い る ん で 絶 対 そ れ や ん な い と ダ メ だ っ て い う 風 に 考 え る と ね。 特 に そ う い う ま あ デ ー タ 系 と か ね。 そ う い っ た も の が 苦 手 な 人 も 多 い と 思 う ん で す よ。 で、 そ こ に 何 か こ う プ レ ッ シ ャ ー を 感 じ て と か、 あ あ や ん な い と い け な い ん だ っ て 憂 鬱 に な っ た り と か す る か も し れ な い で す け ど、 別 に や ら な い く て も ね。 結 果 を 出 す こ と は で き る ん で、 そ の 点 を ね。 ま あ こ う 安 心 し て も ら え れ ば と 思 う ん で す け ど、 な ん で え え? そ う い っ た ね え え、 テ ス ト と か っ て い う も の が 苦 手 な 人 も で す ね。 ま あ、 そ こ に じ ゃ あ 自 分 苦 手 だ か ら ね。 例 え ば 外 注 す る と か で も い い ん で す け ど、 そ も そ も そ れ っ て や る 必 要 が あ る の っ て い う の は ね。 ま ず 最 初 に 考 え て み る こ と が 一 番 大 事 だ と 思 い ま す。
Spotify
Apple Podcasts
Amazon Music
Youtube Music
Overcast 


