7 вещей, которые следует учитывать перед следующим A/B-тестированием некоммерческой организации

Какая некоммерческая организация не хочет предложить своим сторонникам самый сильный, эффективный и ориентированный на результат опыт пожертвований? Один из способов быть уверенным в том, что ваша компания работает максимально эффективно, — это использовать новые идеи A/B-тестирования .

A/B-тестирование — надежная стратегия для некоммерческих организаций, но для ее правильного проведения требуются время и ресурсы. Мы здесь, чтобы подробно рассказать, что входит в процесс A/B-тестирования, чтобы помочь вашей команде подготовиться и составить соответствующий бюджет.

Влияние A/B-тестирования на ваш опыт пожертвований

Распространенная практика информирования пользователей об опыте: A/B-тестирование определяет области для улучшения. В Classy мы часто проводим эти тесты, чтобы информировать об инновациях в наших продуктах и ​​помочь нашему некоммерческому сообществу оптимизировать процесс пожертвований.

Когда некоммерческая организация может провести A/B-тестирование?

Некоммерческие организации могут проводить A/B-тестирование, чтобы:

• Определите возможности оптимизации веб-сайтов или форм для пожертвований (например, цвета, кнопки, шрифты, фирменный стиль, поля форм и т. д.).
• Оцените коэффициент конверсии встроенных форм пожертвований по сравнению со стандартными .
• Лучше понять демографические данные и поведение доноров.
• Увеличьте конкретные цели кампании (например , регулярное получение дохода).
• Уменьшите сложности в процессе оформления заказа (например, отмените определенные требования к контактной информации).
• Оцените текст кампании и креативные элементы, чтобы определить, какие из них больше всего находят отклик у доноров.

Другие методы тестирования

Иногда A/B-тестирование не подходит лучше всего, особенно если вы хотите контролировать такие переменные, как сезонность. Отличным примером этого является один из тестов, которые мы провели в Classy для наших встроенных форм пожертвований.

Встроенная форма пожертвования — это упрощенный интерфейс, который обычно используется в качестве основного варианта пожертвования на веб-сайте. Посетители могут получить доступ к форме с помощью призыва к действию (CTA) «Пожертвовать» в заголовке сайта некоммерческой организации или основного призыва к действию в основной части сайта некоммерческой организации.

Недавно мы протестировали этот вариант использования, чтобы определить, как трафик с веб-сайтов более 500 организаций колеблется в течение девяти месяцев при использовании встроенной формы по сравнению со стандартной формой пожертвования. Мы изучили более 500 000 уникальных сеансов и сравнили эффективность конверсии со стандартным пожертвованием за тот же период предыдущего года.

Вот краткий обзор результатов:

• Медианный рост конверсии составил три балла при использовании встроенного опыта пожертвований, а на мобильных устройствах он увеличился до 4,3 балла.
• Доход на одного посетителя был на 29% выше при использовании встроенных пожертвований.

Наши общеотраслевые и организационные исследования помогают некоммерческим организациям принимать обоснованные решения о пожертвованиях. Затем, когда уместно провести A/B-тестирование, мы также делаем много этого, чтобы дать представление о том, что сегодня находит отклик у доноров в этой сфере.

7 вещей, которые нужно знать перед A/B-тестированием вашей кампании

A/B-тестирование может показаться сложным процессом с несколькими нюансами. Вот почему мы наметили несколько шагов, которые помогут вам принять решения и наметить лучший путь вперед.

1. Получите ясность в цифрах, чтобы настроиться на успех

Четко определенная цель и гипотеза теста, который вы хотите провести, — это то, с чего вы хотите начать. Существует несколько различных метрик и ключевых показателей эффективности (KPI), которые может поддерживать A/B-тест.

Определите свой главный приоритет, будь то увеличение коэффициента конверсии, общего дохода, дохода на посетителя или любого другого конкретного показателя, который увеличит доход вашей некоммерческой организации. В Classy мы отслеживаем все эти и многие другие ключевые показатели эффективности. Мы часто фокусируемся на увеличении дохода, который каждый посетитель приносит с помощью формы пожертвования, которая представляет собой целостный показатель, учитывающий коэффициент конверсии и размер пожертвования.

Как только у вас появится ясность в отношении ваших целей и измерения успеха, определите уровень статистической значимости вашего комфорта, на котором будут основываться ваши решения.

Просто помните, что тестирование может быть сопряжено с трудностями, и вам, возможно, придется провести тестирование несколько раз, чтобы убедиться, что вы можете положиться на результаты. Наша команда рекомендует достичь статистической значимости 95 %, прежде чем предпринимать следующие шаги, чтобы результаты были максимально точными и репрезентативными.

2. Сначала проверьте конкретные переменные

Переменные, которые вы тестируете, имеют значение, и вам следует сосредоточиться на том, чтобы избежать одновременного тестирования слишком большого количества переменных. Например, если вы тестируете дизайн приложения для пожертвований, добавление новых шрифтов и интервалов может исказить ваши результаты и затруднить понимание того, что на самом деле приводит к увеличению или снижению производительности.

Единственное, что должно меняться между тестируемыми экспериментами, — это тестовая переменная. Это означает, что такие вещи, как логотип, заголовок, текст, шрифт и интервалы, должны оставаться неизменными, если вы хотите увидеть эффект от простого изменения дизайна. В связи с этим вы хотите запретить запуск других A/B-тестов на вашем веб-сайте, которые могут повлиять на результаты вашего теста.

3. Учитывайте размер выборки

Размер выборки вашей аудитории должен быть достаточно большим, чтобы достичь статистической значимости для достижения надежных результатов. В конце концов, тестирование 15 человек не представляет собой тысячную потенциальную донорскую базу. Более обширная группа, представляющая различные модели мышления и сценарии, уменьшит вероятность случайности и увеличит ваши шансы на точность.

Кроме того, чем больше сеансов получает сайт, тем быстрее A/B-тестирование позволяет получить статистически значимые результаты и достоверную информацию. Это означает, что при любом сценарии необходимо стремиться к как можно большему представительству вашей тестируемой аудитории. Это может занять некоторое время, но чем больше, тем лучше.

Общее правило таково: для высоконадежного теста необходимо минимум 30 000 посетителей и 3 000 конверсий на каждый вариант. Если вы будете следовать этому правилу, вы, как правило, получите достаточный трафик и конверсии для получения статистически значимых результатов с высоким уровнем достоверности. ¹

4. Получайте более точные результаты в реальных условиях

A/B-тесты должны воссоздать типичные модели и условия трафика вашего некоммерческого веб-сайта. Подумайте о том, какой объем трафика обычно получает ваш некоммерческий веб-сайт в течение недели, и используйте это число, чтобы определить, как долго вам потребуется проводить тест, чтобы достичь статистической значимости.

Минимум две недели — это общий базовый уровень для учета естественных колебаний. Если вы не видите ежедневного увеличения трафика, тесту может потребоваться больше времени, чтобы убедиться, что вы все точно фиксируете.

5. Инвестируйте в надежную программу тестирования.

Несколько программ могут помочь в проведении A/B-тестирования. Самый популярный инструмент, Google Optimize, бесплатен, но его срок действия прекратится 30 сентября 2023 года. Вместо него некоммерческие организации могут рассмотреть возможность платной подписки на другой инструмент, такой как Optimizely или Vanguard FTSE Emerging Markets ETF.

Эти инструменты предлагают комплексные функциональные возможности, которые помогут вам запустить, отслеживать и анализировать тест. Однако необходимо отметить, что для полного использования потенциала инструментов A/B-тестирования обычно необходим ряд ресурсов, строгий мониторинг и углубленный анализ.

Classy позволяет легко дублировать текущий веб-сайт пожертвований и вносить небольшие изменения без какого-либо внутреннего кодирования. Затем вы можете провести A/B-тестирование каждого URL-адреса кампании по сравнению с другим на своей платформе тестирования. Мы рекомендуем делить трафик 50/50.

6. Проверьте долгосрочные тенденции данных, чтобы получить полную картину.

Ваш A/B-тест может дать представление о конкретных изменениях в определенное время. Это означает, что вам, возможно, придется провести серию тестов, чтобы увидеть тенденции с течением времени, когда вы начнете думать о более широкой картине своих данных.

Дорожная карта продукта и путь инноваций Classy основаны на результатах нескольких опытов пожертвований в разные сезоны. Таким образом, мы проводим A/B-тестирование для некоммерческих организаций, чтобы получить полную картину и уверенно использовать наши результаты для принятия решений.

7. Подумайте, как каждый тест повлияет на вашу прибыль.

Теперь вы понимаете, сколько уходит на один A/B-тест. Естественно, вы хотите увидеть окупаемость своих затрат и времени, поэтому подумайте, какое влияние эти эксперименты могут оказать на вашу прибыль.

Инвестиции в платформу для сбора средств, которая проводит скрытое тестирование, чтобы убедиться, что она предлагает лучшие инструменты и опыт проведения кампаний в отрасли, могут избавить ваших сотрудников (и финансовую команду) от дополнительной работы или трудностей. Мы в Classy знаем, что эта информация ценна, поэтому позаботимся о ней за вас.

Когда мы сравнивали встроенные формы пожертвований со стандартными формами пожертвований на Classy, ​​мы увидели, что некоммерческие организации конвертируют доноров со скоростью, в 2 раза превышающей отраслевой стандарт .Это один из примеров идей, которые лежат в основе нашей платформы и служат основой для рекомендаций и коучинговых советов. Классные клиенты могут извлечь выгоду из своих стратегий по сбору средств.

Когда в ходе тестирования мы увидели влияние встроенных форм пожертвований, результаты конверсии вдохновили многие некоммерческие организации зарегистрироваться, чтобы ощутить это влияние.

Например:

• В организации Many Hopes объем пожертвований увеличился на 56% по сравнению с прошлым годом.
• V Foundation увеличил конверсию на 13 пунктов.
• У Feeding San Diego коэффициент конверсии составил 44%.

Найдите платформу для сбора средств, которой вы можете доверять

A/B-тест – это ценный инструмент для принятия уверенных решений в вашей некоммерческой организации. Однако это также дорогостоящий и трудоемкий процесс, который может вызвать дополнительную работу или трудности, если выполнять его в одиночку. Вот здесь и появляется Классный.

В Classy мы стремимся тестировать наши продукты до и после того, как они будут доступны клиентам, чтобы гарантировать, что каждый продукт наиболее эффективным и результативным образом отвечает потребностям отрасли. Кроме того, мы стремимся предоставить каждой некоммерческой организации, использующей Classy, ​​уверенность в том, что каждый продукт в нашем пакете для сбора средств проходит тщательное тестирование в полной мере, а затем модифицируется с учетом результатов, чтобы удовлетворить ожидания доноров и некоммерческих организаций.

Мы с нетерпением ждем продолжения экспериментов с A/B-тестированием на нашей платформе, поскольку мы получим лучшее понимание того, что находит отклик у сегодняшних доноров и что заставляет их предпринимать действия в поддержку таких невероятных миссий, как ваша.

Копирайтер: Аянна Жюльен

Источник статьи

1. «Как правильно рассчитать размер выборки при A/B-тестировании», «Угадай тест», последнее изменение: декабрь 2021 г., https://guessthetest.com/calculating-sample-size-in-ab-testing-everything-you-need-to -знай .