0

私の Web ページには 2 つの変更がありますが、多くの変数を監視しています。したがって、ウェブサイトの監視実験から抽出できるのは次のとおりです。

Original solution: Visitors,   body link click-visitors,    most popular click-visitors,    share-visitors.
Solution with some change: Visitors,   body link click-visitors,    most popular click-visitors,    share-visitors.

単純な 2 サンプル部分のテストについて疑問に思っていました。監視対象変数のそれぞれを取得し、元のソリューションと変更されたソリューションの部分テストを計算します。

全体的な結果について何かを教えてくれるかどうかはわかりません-元のソリューションが何らかの変更を加えたソリューションよりも優れているかどうか。

この目的のために私が使用できるより良いものはありますか？アドバイスをいただければ幸いです。

4

1 に答える 1

0

関心のあるビジネス指標と統計的有意性のテストという 2 つのことを混同しているように思えます。前者は、測定したいビジネス上の測定値です。これは、売上、コンバージョン、サブスクリプション率、またはその他の多くの可能性があります。たとえば、間違ったメトリックを使用する危険性に関する適切な議論については、この論文を参照してください。統計的有意性は、これまでに見た測定値の数が、2 つの経験の違いがランダムである可能性が非常に低いという主張を立証するのに十分かどうかを示す検定です。良い議論については、たとえばこの論文を参照してください。

于 2016-09-19T22:41:11.243 に答える