Команда Sber500 провела ретроспективу трёх потоков и обнаружила, что из 24 показателей, по которым оценивали стартапы, реально коррелировали с успехом лишь шесть. Рассказываем, как пересобрали систему и что изменилось.
В 2023 году команда Sber500 завершила третий поток программы и впервые позволила себе остановиться, чтобы задать неудобный вопрос: а что из того, что мы измеряем, действительно имеет значение?
Стандартный чеклист трекера на тот момент включал 24 показателя: от скорости привлечения первых клиентов до NPS основателей по отношению к программе. Всё это собиралось, агрегировалось и выводилось на дашборды. Но коррелировало ли это с тем, что происходило со стартапом через год?
«Из 24 метрик только 6 значимо коррелировали с тем, привлёк ли стартап следующий раунд или вышел на устойчивую выручку.»
— Алексей Громов, Sber500Для ответа на этот вопрос провели корреляционный анализ: взяли данные по 312 стартапам из трёх потоков и сопоставили все 24 показателя с двумя исходами — привлечением следующего раунда финансирования и достижением устойчивой выручки через 18 месяцев после окончания программы.
Остальные 18 показателей — включая оценку питч-дека, технологическую сложность продукта, количество упоминаний в медиа и удовлетворённость основателей программой — не показали значимой корреляции ни с одним из двух исходов.
Это не значит, что они бесполезны. Некоторые из них важны для операционного управления программой. Но как предикторы долгосрочного успеха стартапа они не работали.
В четвёртом потоке Sber500 трекеры работали только с шестью метриками. Дашборд стал проще. Еженедельные отчёты сократились с двух страниц до половины. Трекеры говорили, что наконец чувствуют себя наблюдателями за стартапом, а не операторами базы данных.
Предварительные результаты четвёртого потока (данные через 12 месяцев): конверсия в следующий раунд выросла с 23% до 31%. Команда объясняет это не только упрощением метрик, но и тем, что трекеры смогли сфокусировать внимание на действительно важных сигналах.
Больше метрик ≠ лучше понимание. Шесть правильно выбранных показателей дают больше, чем два десятка собранных «на всякий случай». Начните с вопроса: что именно мы пытаемся предсказать?