無料で利用可能、アカウント不要

A/B テスト計算ツール

2 つの独立したグループで変換を比較します。各コンバージョン率、パーセンテージポイントの差、相対上昇率、95% 信頼区間、および近似両側検定を確認します。

グループA
グループB

ユニーク訪問者と 1 つの事前定義されたコンバージョン イベントを使用します。カウントは整数である必要があり、コンバージョンは訪問者数を超えることはできません。結果は独立したグループを想定しており、近似値です。

2 つの A/B テストのコンバージョン率を比較するにはどうすればよいですか?

各グループの訪問者とコンバージョンを入力します。この計算機は、プールされた 2 つの比率の Z 検定と Wilson/Newcombe 95% 間隔を使用します。テストの前に指標とサンプルサイズを計画します。繰り返しチェックすると、誤検知のリスクが高まる可能性があります。

よくある質問

2 つの A/B テストのコンバージョン率を比較するにはどうすればよいですか?

各グループの訪問者とコンバージョンを入力します。この計算機は、プールされた 2 つの比率の Z 検定と Wilson/Newcombe 95% 間隔を使用します。テストの前に指標とサンプルサイズを計画します。繰り返しチェックすると、誤検知のリスクが高まる可能性があります。

私の実験番号はアップロードされていますか?

いいえ。計算はブラウザで実行されます。このツールは数値をアップロードしたり保存したりしません。

0.05 未満の p 値は何を意味しますか?

テストの仮定の下では、実際のコンバージョン率が同じであれば、これほど異なる結果は珍しいことを意味します。バージョンが最適である可能性を測定するものではありません。

決定的な結果が得られないということは、両方のバージョンが等しいことを意味するのでしょうか?

いいえ。このテストでは、選択したしきい値での差異を示す十分な証拠が得られなかったことを意味します。より大規模なサンプル、またはより綿密に計画されたサンプルが必要になる場合があります。

重要な結果が出たらすぐにテストを中止する必要がありますか?

チェックと早期停止を繰り返すと、誤検知が増加する可能性があります。開始する前に、メトリクス、サンプル サイズ、テスト期間を定義します。