質問
暫定チャンピオンが決定しましたとメールが来ましたが何をすればいいですか?
回答
テストを一定期間実施しましたが、チャンピオンは決定しませんでした。
統計的には優位ではありませんが、テストパターンの中で最もCVRが高い可能性があるパターンを暫定のチャンピオンにして次のテストに移行するか、現在のテストを継続するかの意思決定をお願いします。
テストパターンのCVRが競っていれば競っていいるほどチャンピオンが決まりにくくなりますので一定の期間が過ぎた段階で次のテストに移行することをおすすめしています。
詳細は「自動最適化の流れ」をご覧ください。