Быстрый старт

Пошаговое руководство для первого запуска AB-Labz Workbench.

Шаг 1: Регистрация и вход

После регистрации вы попадаете на главную страницу — Дашборд. Здесь отображаются:

• Активные эксперименты — тесты, которые идут прямо сейчас
• Ближайшие эксперименты — запланированные тесты
• Готовые к анализу — завершенные эксперименты, ожидающие анализа данных

Если вы только начинаете, дашборд будет пустым — это нормально, сейчас создадим первую гипотезу.

Шаг 2: Создайте гипотезу

Перейдите в раздел Гипотезы через боковое меню. Нажмите кнопку "Добавить гипотезу" и заполните форму:

• Название: например, "Новая CTA-кнопка на главной"
• Гипотеза: "Если добавить яркую CTA-кнопку, конверсия в регистрацию вырастет"
• Ключевая метрика: выберите из селектора (метрики создаются в каталоге метрик)
• Ожидаемое изменение: например, 10
• External ID (опционально): идентификатор эксперимента из вашей системы сплитования (используется в API)
• Теги (опционально): для группировки гипотез

Нажмите "Сохранить" — гипотеза появится в списке.

Шаг 3: Рассчитайте размер выборки

Перейдите в раздел Инструменты → Расчёт выборки. Введите параметры метрики и желаемую статистическую мощность.

Инструмент покажет, сколько пользователей нужно в каждую группу. Это поможет спланировать длительность эксперимента.

Шаг 4: Запланируйте эксперимент

Откройте гипотезу и нажмите кнопку "Запланировать". Укажите даты начала и окончания эксперимента (на основе расчёта выборки). После сохранения эксперимент появится в Календаре, где можно отслеживать все запланированные тесты.

Шаг 5: Проведите эксперимент

Реализуйте изменение в вашем продукте, разделите пользователей на группы (control/treatment) и собирайте данные. AB-Labz Workbench не управляет сплитованием — это делается в вашей системе.

Шаг 6: Загрузите данные и проанализируйте

Когда эксперимент завершен, подготовьте датасет для анализа:

user_id,group,registration_completed
user_1,control,0
user_2,control,1
user_3,treatment,1

Перейдите в раздел Подготовка данных и загрузите данные:

• CSV файл — загрузите файл напрямую
• API — получите данные из хранилища

После загрузки запустите анализ. Система рассчитает и покажет статистику: изменение метрики, p-value, доверительные интервалы.

Шаг 7: Сохраните результаты

После анализа нажмите кнопку "Сохранить результаты" на странице анализа. В модальном окне:

• Выберите гипотезу, к которой относится эксперимент
• Либо создайте новую гипотезу прямо из результатов
• Результаты автоматически сохранятся в выбранной гипотезе

Важно: Если вы анализировали данные с сегментацией (несколько расчётов по разным сегментам), сохраняйте каждый результат отдельно в одну гипотезу. После сохранения в гипотезе появятся переключатели между результатами сегментов.

Гипотеза с сохраненными результатами автоматически переместится в Архив экспериментов — так вы накапливаете знания о том, что работает в вашем продукте.