3. Управление IT-проектами и продуктом. A/B тесты | Технострим
3. Управление IT-проектами и продуктом. A/B тесты | Технострим
https://www.youtube.com/watch?v=tj0q8PyYIpE
00:00 Цифры и метрики в веб-аналитике
• Обсуждение важности хранения результатов исследований в Google Drive.
• Обсуждение различных инструментов для хранения данных, включая Google Drive, Notion, и другие.
03:52 Аб-тесты и их значимость
• Обсуждение значимости результатов аб-тестов и их влияния на принятие решений.
• Обсуждение проблемы "подглядывания" в аб-тестах и важности ожидания окончания эксперимента для получения значимых результатов.
11:48 Ограничение выборки и поправки для аб-тестов
• Обсуждение важности ограничения выборки для аб-тестов и использования калькулятора для расчета необходимого объема выборки.
• Обсуждение поправки Банферони для аб-тестов и ее влияния на значимость результатов.
13:48 Метрики и юнит-экономика
• Обсуждение метрик и их использования в продуктах и проектах.
• Метрики могут быть использованы для отслеживания статистики, например, количества пользователей, денег, изменений в продукте и т.д.
18:48 Юнит-экономика и воронки
• Юнит-экономика - это измерение количества денег, которое приносит типичный клиент на протяжении всего времени использования продукта.
• Воронки - это процесс, который показывает, как пользователи проходят через различные этапы использования продукта.
21:46 Примеры юнит-экономики и воронки
• Пример: 100 000 пользователей заходят на сайт, 50 000 выбирают продукт, 20 000 совершают покупку.
• На этапе регистрации отпадает 20 000 пользователей, и только 1 000 совершает покупку.
26:46 Анализ конверсии и ретеншина
• В видео обсуждается анализ конверсии и ретеншина в играх.
• Показаны графики конверсии в первую и вторую покупку, а также ретеншина.
• Черный отток - это отток пользователей из продукта.
• Показан пример черного оттока в примере с интернет-провайдером.
• Обсуждается важность разделения пользователей на когорты для анализа черного оттока.
40:39 Юнит-экономика и музыкальные сервисы
• В видео обсуждается юнит-экономика и ее применение в музыкальных сервисах.
• Рассматриваются примеры увеличения прибыли и привлечения пользователей.
49:30 Увеличение потока пользователей
• Увеличение потока пользователей не приводит к увеличению прибыли, так как маркетинговые расходы остаются прежними.
• Увеличение потока пользователей может привести к увеличению маркетинговых расходов и не приносит прибыли.
54:15 Увеличение цены подписки
• Увеличение цены подписки может привести к увеличению прибыли, но только в краткосрочной перспективе.
• В долгосрочной перспективе, увеличение цены подписки может привести к снижению прибыли и увеличению убытков.
55:15 Увеличение прибыли и конверсии
• Увеличение прибыли в три раза, но с большими издержками.
• Увеличение конверсии на 5% может помочь улучшить ситуацию.
01:02:08 Напоминание о себе и рекурентные платежи
• Напоминание о себе может помочь увеличить ретеншн.
• Рекурентные платежи, такие как подписка, могут помочь привлечь новых пользователей и увеличить конверсию.
01:06:08 Юнит-экономика и домашнее задание
• Юнит-экономика - это расчет издержек и прибыли на одного пользователя.
• Домашнее задание: расчет юнит-экономики для разных моделей подписки.
01:09:02 Ретеншн и его значение
• Ретеншн - это частное из тех людей, которые пришли в приложение после определенного дня.
• Ретеншн бывает разный, но на практике лучше использовать классический ретеншн.
01:11:02 Триггер, награда и инвестиция
• Триггер - это момент, который заставляет пользователя действовать.
• Награда - это психологическое поощрение, которое повышает ценность продукта для пользователя.
• Инвестиция - это действие, которое пользователь должен совершить, чтобы стать активным пользователем.
01:14:02 Пинтерест и его ретеншн
• Пинтерест использует модель рекомендаций, которая работает лучше, когда пользователи знают о продукте больше.
• Пинтерест предлагает пользователям обновить темы, которые им интересны, чтобы улучшить рекомендации.
• В хороших продуктах должен быть крючок, который объясняет ценность продукта для пользователя.
• Пинтерест - хороший пример продукта с крючком, который работает на ретеншн.
• Пинтерест зарабатывает на рекламе и платных функциях.
01:21:56 Метрики и их влияние на счастье пользователей
• В видео обсуждаются метрики, которые влияют на счастье пользователей и их вовлеченность.
• Метрики могут быть связаны с счастьем, ценностью для пользователя, ретеншном и ингейджментом.
01:28:50 Пример метрик для музыкального сервиса
• В примере рассматривается музыкальный сервис Spotify, который использует метрики для повышения ингейджмента и адапшена.
• Метрики включают в себя количество песен, которые пользователь слушает, и время использования приложения.
01:33:50 Влияние технических аспектов на метрики
• В видео подчеркивается важность технических аспектов для успешного использования метрик.
• Если сервис работает с техническими проблемами, это может негативно повлиять на метрики и счастье пользователей.
01:34:50 Метрики и юнит-экономика
• Обсуждение важности технических метрик и их влияния на работу продукта.
• Упоминаются сервисы для отслеживания метрик, такие как Яндекс Метрика, Гугл Аналитика и Амплиют.
• Обсуждаются ключевые метрики, такие как дау-мау, лайф-тайм велью и кастом реквизишн-кост.
01:41:45 Юнит-экономика и расчеты
• Юнит-экономика может быть рассчитана для любого бизнеса, даже если о нем мало информации.
• Упоминается бот в Фейсбук-мессенджере "Рулдом Ол", который помогает посчитать юнит-экономику.
• Важность аккуратного подхода к расчетам и избегания ошибок.