Что такое А/В тестирование?

Все то, что вам необходимо знать, находится здесь

Введение

Уже прошло время, когда мы полностью тратили бюджет маркетинга на все подряд. Сегодня команды маркетинга в состоянии принять обоснованное решение с целью оптимизировать использование своего сайта для посетителей. В своих решениях они опираются на надежный опыт благодаря А/В тестированию, а не на субъективную интуицию...

Пришло время внедрить культуру эксперимента и проверить на практике все ваши идеи !

Опираясь в своей стратегии на достоверные сведения, вы станете не только ловкими и гибкими, но также будете понимать, что у вас работает, а что не работает Вы будете инвестировать ваше время и деньги в то, что действительно хотят ваши посетители. Таким образом вы будете принимать лучшие решения для вашего бизнеса.

A/B тестирование: секретное оружие лучших маркетологов

75% сайтов с ежемесячным трафиком более 1 млн посетителей проводят А/В тестирование. Возможно и вам стоит исключить всякую неуверенность в принятии ваших маркетинговых решений.

Однако верным является то, что A/B тестирование требует внедрения строгого процесса, а также периода для его освоения. Вам нужно будет определить зоны оптимизации вашего сайта, расставить приоритеты плана действий, а также освоить (немного) статистику , чтобы не допустить ошибок..

Но не бойтесь, мы собрали воедино все источники с лучшими статьями великих профессионалов из этой области, которые вам понадобятся, чтобы овладеть данной темой.

Что такое A/B Тестирование?

Определение: A/B тестирование - это экперимент, который осуществляется на интернет странице, мобильном приложении, рекламе (и т.д.), целью которого является подтверждение гипотез по оптимизации возможных улучшений в сравнении с всевозможными вариантами ( или с оригналом). Оно вам позволит увидеть то, что работает для ваших посетителей, основываясь на статистическом анализе улучшений.



А/В тестирование можно также назвать сплит-тестированием или сплит-тестированим URL. В классическом А/В тестировании два ваианта ваших страниц находятся на одном и том же URL адресе . В случае сплит-тестирования URL, вариант B находится на отдельном URL адресе (ваши посетители конечно же не видят разницу).


Что такое мультивариантное тестирование?

В некоторых случаях возможно тестировать одновременно несколько изменений на одной веб странице: баннер, заголовок, описание или еще видео.Мультивариантное тестирование позволяет вам тестировать все эти оптимизации в рамках одного экперимента.

Ваш инструмент А/В тестирования создаст столько вариантов различных сочетаний для того, чтобы определить, какое из них имеет наибольшее влияние на ваш процент изменений.

Проблема мульвариантного теста заключается в том, что он требует огромного объёма интернет трафика для того, чтобы иметь возможность протестировать все варианты и получить статистическую значимость, которая вам позволит принять обоснованное решение. Если вы желаете узнать больше о том, в чем заключается разница между мультивариантным тестом и А/В тестированием, то мы вам советуем прочитать материалы по ссылке Статья из HubSpot разница между MVT (мультивариантный) и A/B Тесты.

Пример с баннером и картинкой
(4 вариации, контрольная версия без картинки)


Bandit тестирование или multi-armed bandit тестирование

Multi-armed bandit тестирование это когда ваш алгоритм автоматически и постепенно перенаправляет вашу аудиторию на выигрывающую вариацию..

Если вы хотите знать больше о multi-armed bandit testing, the best article by far is by Alex Birkett from ConversionXL.


A/B/n тестирование

А/В/n тестирование позволяет тестировать n гипотезы вашей страницы.. Например, вы сможете протестировать шесть вариантов вашей страницы, проведя A/B/C/D/E/F тест.




В чем заключается преимущество А/В тестирования?

Для чего начинать А/В тестирование? Или лучше спросить: вы доволны тем способом, которым вы используете интернет трафик, полученный вашими силами и материальными затратами? Оптимизация конверсий стоит гораздо дешевле, чем приобретение интернет трафика с более важной окупаемостью инвестиций. С помощью А/В тестирования эффект будет усилен. Но А/В тестирование вам позволит гораздо больше:

Вот несколько примеров вопросов, на которые вы сможете дать надежные ответы блягодаря А/В тестированию.


Как работает А/В тестирование?

А/В тестирование позволяет вам сравнить существующую версию вашей страницы с одним (или несколькими) вариантом (вариантами) возможной оптимизации, который (которые) вы хотите проестировать (СТА, заголовок,оттельный элемент и т.д. ...)


Ваши посетители делятся на равные части и повергаются различным вариантам тестирования с целью определить вариант, который лучше всего подходит для поставленной вами цели (вход, клик, добавление в корзину, …), то есть чей процент конверсии является лучшим. Затем данные подвергаются анализу и сравнению для того, чтобы определить возможны или нет изменения, которые вы хотите реализовать.


Вы желаете знать больше о том, как работает А/В тест?

Уровень конверсии на сайте ключ к вашему успеху в a/b тестировании

Что такое оптимизация конверсии ( или CRO)?

Это процесс по улучшению вашего сайта, чтобы увеличить количество действий, которые вы хотели бы, чтобы пользователи совершили на сайте.


Обычно это покупка или «конверсия» и предоставление им вашей контактной информации. Другими словами, превратите ваших посетителей в покупателей.

Иметь большой трафик - это неоспоримый плюс, но нужно также еще заработать на нём. Именно здесь оптимизация конверсии приобретает свой смысл и свою значимость.


Несколько лучших пособий по оптимизации процента конверсии:

Как провоить А/В тестирование: фреймворки и методология

Как и любой другой инструмент А/В тестирование опирается на процесс и строгую методологию для определения идей и концентрации на наиболее обоснованных А/В тестированиях.

Каждая компания развивает свой собственный процесс, но в общем он похож на следующее:

  1. 1

    Измеряйте и анализируйте данные вашего сайта для определения областей оптимизации и возможностей роста.

  2. 2

    Сформулируйте одну из гипотез оптимизации (отличный способ подготовить гипотезу от Craig Sullivan)

  3. 3

    Расставьте приоритеты ваших идей А/В тестирования: одна из наболее часто используемых методик фрейморк приоритезации - PIEсозданная Widerfunnel.

    Благодаря этой системе вы сможете классифицировать ваши идеи тестирования в соответствии с тремя критериями оценки от 1 до 10, чтобы определить с какой или каких из них следует начать.
    Потенциал ./10: На сколько вы оцениваете маржу улучшений на этой (этих) странице (страницах)?
    Влияние ./10: Какая величина трафика (объем, качество) на этой (этих) странице (страницах)
    Простота/легкость в реализации ./10: Насколько легко реализовать тест ( 10= очень легко, 1= очень сложно)

    Среднее значение трех оценок укажет вам, какой тест начать (разумеется, существуют и другие системы приоритетов, и от вас зависит выбор того, что вы предпочитаете).

  4. 4

    Проведите А/В тестирование наиболее важных гипотез

  5. 5

    Анализируйте и узнавайте/ изучайте результаты ваших А/В тестов

  6. 6

    Поделитесь вашими результатами внутри компанииКак это объяснил Thomas Sauzedde, Генеральный директор routard.com, это один из ключевых факторов успеха ваших усилий по оптимизации! Нужно способствовать обмену мнениями и обсуждениям, которые приведут к новым идеям тестирования. Не забывайте всегда вовлекать в процесс команду IT.

  7. 7

    Начать заново!


Другие системы и процессы А/В тестирования:

Что тестировать? дюжина идей

На вашем сайте вы можете тестировать абсолютно все с помощью А/В тестирования:


Но время от времени нужно стимулировать творчество и находить новые источники вдохновения. Чтобы вам помочь, вот несколько идей для А/В тестирования.

Предупреждение: то, что работало у других, не обязательно будет работать у вас ! Не пытайтесь применить все, что написано здесь, если вы не проанализировали предварительно целесообразность использования для вашей ситуации и то,как вы можете это адаптировать под ваш бизнес.


Находите вдохновение для ваших следующих А/В тестов

А/В тест: хорошие (и плохие) практики

В случае неправильного использования А/В тестирование может быть сложным и противоречить вашим бизнес целям

Защитите ваш успех, учась на лучших практиках и ошибках , которые не следует допускать.


Лучшие практики для успешных А/В тестов
 

Заметка: Наша еженедельная рассылка Conversion Matters является источником вдохновения для всех маркетологов, которые хотят запустить лучшие кампании по оптимизации пользовательского опыта подписка здесь

Книги, которые позволят идти дальше

Существует не так много книг (или электронных книг) по А/В тестированию... по крайней мере на французском языке. Вот некоторые из них, которые вам позволят узнать больше об этой теме.


А/В тестирование Отчет и результаты

А/В тестирование позволяет принять обоснованное решение и обучаться. Ваша отчетность и грамотный анализ результатов являются необхоимыми условиями, чтобы добиться окупаемости инвестиций.


Как правильно читать и анализировать результаты А/В тестирования:

Понимание статистики для A/B тестирования

А/В тестирование основывается на различных методах статистического подсчета. Вам не нужно быть ученым, чтобы добиться результатов, но некоторые понятия из математики будут, несомненно, полезны.

В А/В тестировании существкет 2 метода статистического подсчета, который отвечает на 2 потребности и различные цели. Вот как мы подходим к этой теме статистический двагитель Kameleoon’s.

Детерминированный метод (называемый также « частотный ») позволяет простое прочтение надежности результатов, данных с помощью индикатора процента доверия: с показателем 95% и более, у вас есть 95% вероятности принять верное решение. Тем не менее, у метода есть ограничение : «фиксированный горизонт», это значит, что до завершения тестирования на этот показатель нельзя опираться, чтобы оценить надежность результатов.

Байесовский метод показывает вероятность результатов.Больше не нужно ждать конца теста, чтобы увидеть тенденции и интерпретировать данные. Однако, этот метод имеет также свои требования : правильно интерпретировать доверительный интервал для оценок во время теста. Уверенность в вероятности того, что один из данных вариантов победит, увеличивается с каждой дополнительной конверсией.


Другие источники по статистке для А/В тестирования

A/B ТЕСТИРОВАНИЕ: ЗНАНИЯ, УМЕНИЯ И НАВЫКИ УПРАВЛЕНИЯ

Чтобы удача была полностью на вашей стороне, вам понадобятся определенные навыки от вас или вашей команды: например,веб-аналитика и пользовательский опыт.


Дополнительные инструменты,чтобы максимально повысить шансы на успех ваших А/В тестов

Будь то инструмент для управления проектами, расчета размера выборки или продолжительности теста, набор инструментов, чтобы вам помочь в реализации ваших процесов. Выбор достаточно большой, чтобы направить вас на путь успеха.


Дополните ваше решение А/В тестирования с помощью этих инструментов



Управление проектами

Какие блоки по А/В тестированию вам следует почитать?

"Во Франции есть ссылка на эту тему “Conversion Matters” (Предупреждение: Это наш блог!, но мы гордимся тем, что собрали самое большое сообщество маркетологов в области оптимизации работы пользователя). Если вы любите читать на английском языке, то ниже вы найдете список лучших блогов по A/B тестированию и оптимизации работы пользователя, содержимое которых вы сможете изучить, найти вдохновение, и стать настоящим профессионалом в области A/B тестирования."


86 профессионалов по А/В тестированию

Мир оптимизации конверсии развивается очень быстро, и отслеживать мнения професссиналов, которые определяют его будущее, может быть для вас очень полезным. Ниже вы найдете полный список аккаунтов twitter, а также экспертов, которые нас вдохновляют.


Twitter list:

https://twitter.com/AlarconJB/lists/cro-experts


Individual Twitter handles


Lance Jones

Jason Kincaid

Noah Kagan

Hiten Shah

Dave McClure

Avinash Kaushik

Daniel Gonzalez

David Kirkpatrick

Shanelle Mullin

Steve Blank

Matt McGee

Rand Fishkin

Bart Schutz

Rick Perreault

Sean Ellis

Campaign Monitor

Moz

Bryan Eisenberg

Shopify

Scott Brinker

Chris Goward

Brian Massey

Jeffrey Eisenberg

Sherice Jacob

Carlos del Rio

Pam Moore

Angie Schottmuller

Ryan Deiss

Ian Lurie

ashukairy

Khalid Saleh

Anne Holland

Lincoln Murphy

Amy Africa

Unbounce

Raven Tools

Roger Dooley

Neil Patel

Nichole Elizabeth

Craig Sullivan

Peep Laja

Jon Henshaw

Marketing Nutz

Dan Siroker

Tommy Walker

John Teevan

Joanna Wiebe

Rich Page

Tiffany Da Silva

Jason Quey

Ton Wesseling

Adam Hutchinson

Michael Aagaard

Matt Gershoff

Andy Johns

Brian Balfour

Oli Gardner

Tim Ash

Paul Rouke

Linda Bustos

Theo van der Zee

Get Elastic

Conversion Conference

MAA1

Talia Wolf

Justin Rondeau

Tyson Quick

KlientBoost

Andre Morys

Conversion.com

Anna Talerico

Kelly Cutler

Brooks Bell

Andrew Youderian

Alhan Keser

Conversion Sciences

Alex Birkett

Steven Jacobs

Kaitlyn Nelson

Kevin Hillstrom

Dan Wang

Malachi Leopold

Pete Koomen

Aaron Orendorff

Chief Conversionista

Joel Harvey

Jean-Baptiste Alarcon

Clément René

Вы хотите обратиться в агентство, чтобы провести А/В тестирование?

Если у вас нет внутренних ресурсов, обратиться в агентство - это хороший способ для запуска стратегии А/В тестирования. Мы работаем только с лучшими, вы можете доверять списку, который приведен ниже.

Заметка: Команды Kameleoon могут также вас сопровождать в процессе внедрения и исполнения вашей стратегии оптимизации. Можно узнать больше по следующей ссылке Наши стратегии по оптимизации


Вы готовы начать А/В тестирование?
Попробуйте наше бесплатное решение А/В тестирования!

Создавая ваш аккаунт, вы соглашаетесь с нашими условиями использования.