AI討論型戦略設計の優位性を示したMyMarketerのベンチマーク結果

AI討論型戦略設計の優位性

株式会社WHATが開発したマーケティング戦略支援AI「MyMarketer」は、内部ベンチマークを実施し、異なるAIモデルの戦略生成能力を比較検証しました。特に注目されたのは、MyMarketerが搭載する「討論モード」です。この機能は、複数のAIが議論を交わしながら戦略を構築するもので、従来の単発生成方式に対してどのような利点があるのかを探求します。

検証の目的と条件

今回の検証は、AIマーケティングSaaSや地域密着型美容室、Web制作会社、相続専門税理士事務所の4業種を対象に行われました。目的は、MyMarketerの討論モードとGPT、Claude、Geminiといった他のAIモデルによる単発の戦略生成を比較し、それぞれの出力にどのような差があるのかを確認することです。

さまざまな視点から計112判定を行った結果、MyMarketerの討論モードは97件で優位性を示しましたが、すべての観点での圧倒的な優位性を証明するものではありません。

検証結果の詳細

AIマーケティングSaaSの比較

MyMarketer討論モードとClaude Fable 5の比較では、56判定中48判定で優位でした。一方、AIマーケティングSaaSにおける結果は厳密な条件での比較ではなく、探索的な参考値とされました。特に地域密着型美容室やWeb制作会社においては、単発生成側には劣後判定は見られませんでした。

GPT-5.6 Solとの比較

同様に、MyMarketer討論モードとGPT-5.6 Solとの比較においても、すべての業種でMyMarketerが優位を示しました。ただし、AIマーケティングSaaSの結果は評価モデル間のばらつきが大きく、特に83%の判定一致率が示されました。

論点と結論

本検証では、「独自性」の観点にのみ単発生成側が優位を示す結果となったものの、その背景には入力条件の差があったため解釈には注意が必要です。また、今回の結果は、複数AIによる討論が常に単発生成を上回ることを示すものではないことも理解しておく必要があります。

今後は、より実践的な条件下での検証も進めていく予定です。

AIの提案がもたらす新たな価値

生成AI技術の進展により、マーケティング戦略の提案がスピーディーに行えるようになっていますが、出力された内容をそのままクライアントに提示するのでは不十分な場合が多いです。特に複雑な戦略を理解し、実行可能な形にするためには、提案者自身が内容を把握し、説明責任を果たす必要があります。MyMarketerの討論モードは、マーケティングの複雑な論点を整理し、利用者が判断を下しやすい形にすることを目指しています。

従来のAIの出力に依存せず、戦略を構造化することで、利用者が自らの言葉で提案ができる環境を整えることが非常に重要です。Web制作会社やマーケティング支援会社においては、その価値が特に強調されます。

未来への展望

株式会社WHATの代表取締役、山本至人氏は、「特定のAIモデルの優劣ではなく、AIにどのように考えさせるかが、マーケティング戦略の出力に変化をもたらすことを期待しています」とコメントしており、今後は実際の案件においてどのような価値を生むかを検証していくことが重要と捉えています。

私たちは、AIを活用することによってより多くの提案が生まれ、マーケティング界に新たな風を吹き込むことを目指しています。今後の研究と実践を通じて、さらなる進化を期待したいところです。