問題タブ [abtest]

10,000 個の期限切れのクライアント メール アドレスがあります。メンバーシップに再度参加するための割引を記載したメールを送信したいと考えています。

コンバージョン率を上げるためにA/Bテストをしたい。

統計的有意性を計算するツールを見つけました。例: https://vwo.com/ab-split-test-significance-calculator/

これには、変数としてメールの数があります。

事前にテストをセットアップする場合、各テストで送信する電子メールの数を知るにはどうすればよいですか?

実行できるテストの数には制限があります (最大 10,000)。そのため、すべてのテストを何年もの間実行させることはできません。それが完了すると、大部分が完了します。コンバージョンを最大化する必要があります。

それぞれ 100 ユーザーのテストを 10 回行うとします (2,000 ユーザーの分割テストとして)。

1 つの A/B テストを実行し、1 つ以上のコンバージョンが得られたが、統計的に有意ではない場合、より大きなコンバージョン項目を取り、少なくとも同じくらい良いと仮定して先に進むことはできますか?

各テストの前にテスト期間を設定する必要があることを読みました-場所は覚えていません-。では、100 通のメールを修正した場合 (統計的に有意ではない場合)、無視するだけでよいでしょうか? より良い変換アイテムを選択することの害は何ですか? (おそらく、100 個の項目の後、統計的に有意でない場合、とにかく大したことではありません)?

どうも

Appcelerator Titanium をサポートする A/B テスト用の適切なプラットフォームがあるかどうか知りたいですか? これまでのところ、幸運にも見つけることができませんでした。

rails_adminを使用してモデルの CRUD アクションを管理するRails 4.2 アプリがあります。current_user.admin が必要ですか? == アクセスの場合は true。

Split gemを使用して A/B テストを追加しました。管理者のみが分割ダッシュボードを表示できるようにするために同じ承認を使用したいと考えており、ダッシュボードが example.com/admin/split で利用できるように、管理パネル内にルートを作成するのが最も簡単な方法であると考えました。

Split::Dashboard を 'admin/split' にマウントできますが、それは単に管理者の承認を完全にバイパスします。

代わりに、ダッシュボードが rails_admin 内にマウントされている admin/split にリダイレクトする、rails_admin ダッシュボードにボタン/リンクを追加したいと考えています。

助けていただければ幸いです。

次の式は、比率の検定で使用される検定統計量を提供します。

提案された a/b テストについて、治療グループ (p2) が 95% の信頼水準で統計的有意性を示すために必要な最小値を示そうとしています。つまり、p2 についてこの方程式を解こうとしています。総人口サイズ、処理される割合、および Z 値がわかっていることを考えると、これは簡単なことのように思えます。しかし、私は代数に行き詰まっています。

特定の信頼度の p 値が満たされるまで p2 の値の範囲を実行する R スクリプトを作成しましたが、それは問題を解決するためのずさんな方法です。

このようなテストのサンプルサイズを決定する場合、どの R 関数を使用する必要がありますか?

10 個の広告がある場合、テストを使用して、クリック率が最も高い広告を決定します。フローとクリックスルーをカウントできます。