Противоречивые результаты экспериментов с Google-контентом

Мы активно используем эксперименты Google в экспериментах API и недавно начали наблюдать эксперименты, заканчивающиеся тем, что победитель набрал более низкий балл, чем другие варианты - см. Скриншоты двух недавних экспериментов.

Кто-нибудь еще видел это? У вас есть идеи, что это значит?

Аналитика противоречивого эксперимента 1

Аналитика противоречивого эксперимента 2

1 ответ

Вероятно, потому что доверие действительно низкое, поэтому Google не уверен, что применяет какой-либо вариант.

  1. Выбор победителя вашего эксперимента

Со временем вы должны увидеть либо исходную настройку объявления, либо вариант, превосходящий другой. Чтобы помочь вам выбрать правильное время для выбора победителя, мы рассчитываем показатель достоверности для двух параметров. Этот показатель показывает, насколько вероятно, что исходный вариант или вариант будут более эффективными (например, с наибольшим доходом).

Мы рекомендуем подождать, пока один из баллов не достигнет не менее 95%, прежде чем выбрать этот параметр в качестве победителя. Когда параметр имеет 95-процентную доверительную оценку, это означает, что мы на 95% уверены, что этот параметр является лучшим показателем из двух.

Вы можете прочитать больше:

https://support.google.com/adsense/answer/6321879?hl=en

Я предлагаю также эту страницу: https://support.google.com/adsense/answer/6321909

Когда вы выбираете победителя в своем эксперименте, мы рекомендуем вам учитывать общее изменение, а также доход (RPM) и относительный показатель качества. Общее изменение равно изменению RPM плюс изменение показателя качества вариации. В целом, положительное общее изменение приведет к лучшей долгосрочной производительности, даже если изменение RPM или показателя качества является отрицательным. В ситуациях, когда RPM и показатель качества указывают на разных победителей, положительное общее изменение может помочь вам принять окончательное решение.

Другие вопросы по тегам