Разъяснение результатов испытаний Sitecore A/B

Question

Недавно мы начали использовать Sitecore A/B Testing, и у меня много вопросов о том, как работает оценка. Я ознакомился с соответствующими документами Sitecore DMS, но все еще не уверен на 100%, понимаю ли я, как работает оценка.

Мое основное понимание состоит в том, что оценки основаны на значении за посещение, и я предполагаю, что значение относится ко всему посещению, а не только к конкретным компонентам, которые мы, возможно, пытаемся оптимизировать с помощью теста А / Б.

Например, если у варианта А есть связанная с ним цель стоимостью 5 баллов, любой, кому предоставлен этот вариант, получит 5 баллов ПЛЮС за любые другие значения целей, которые они активируют во время этого посещения сайта. Это может добавить 5, 10, 50 или более к баллу посещений, и тогда оценка варианта А будет "общая оценка посещений / общее количество посещений".

Может ли кто-нибудь подтвердить правильность моих предположений или объяснить, где я могу быть вне базы? Может ли пользователь, представленный с вариантом B, изменить счет для варианта A?

Answer 1

По умолчанию Стоимость участия рассчитывается для каждого посещения. Таким образом, ваше предположение в основном верно - и это затрудняет проверку того, как конкретный вариант компонента влияет на другой.

Что, как говорится; Есть инструменты, которые помогут вам.

В настоящее время мы внедряем ускорители SBOS ​​в наше решение. У нас та же проблема, которую вы описываете, и нам необходим более детальный подход к тестированию.

По сути, акселераторы SBOS ​​позволяют отслеживать индивидуальную производительность персонализации, а не "просто" смотреть на общую ценность вовлечения.

Ларс Петерсен пишет об этом здесь: http://www.larsdk.dk/2014/01/must-have-marketplace-modules-for-sitecore-digital-marketing-system/

Торговая ссылка для модуля здесь: http://marketplace.sitecore.net/en/Modules/SBOS_Accelerators.aspx

Мы обнаружили несколько проблем при тестировании модуля, но ни один из них не был действительно серьезным. Я знаю, что эти проблемы исправляются, если они еще не сделали.