Ещё раз, сколько потребуется времени чтобы баклажан кончил? Понимаю, что задача обширная, можем в четыре руки одновременно.

Сам цвет поменять не займёт долго. Но вот тут вопрос встанет, что по хорошему нужно провести АБ эксперимент, что уже подразумевает больше 32 часов 😄

Ещё раз, сколько потребуется времени чтобы баклажан кончил? Понимаю, что задача обширная, можем в четыре руки одновременно.

Ещё раз, сколько потребуется времени чтобы баклажан кончил? Понимаю, что задача обширная, можем в четыре руки одновременно.

олимпиадник из команды телеграма:

Что такое регрессия

Ещё раз, сколько потребуется времени чтобы баклажан кончил? Понимаю, что задача обширная, можем в четыре руки одновременно.

Ещё раз, сколько потребуется времени чтобы баклажан кончил? Понимаю, что задача обширная, можем в четыре руки одновременно.

нужен а/б тест для определения оптимального времени cum

Привет всем! С вами Никита. Уверен, вы уже знакомы с моими 🐳 достижениями 💎🤲, но все равно еще раз расскажу, кто именно ведет этот канал: 🇨🇦 В Канаде с 2012 года 💎 Экзит на 24М 🧑 73M пользователей 🤘 Раунд на 48М Чем я делюсь на этом платном 👊 канале? 🥰 Как найти любовь инвесторов 💥 Как взорвать рынок питчем и продуктом 🤔 Где найти мани 📜 Как составлять венчурные соглашения ❓ И обо всем остальном неочевидном в VC Рад видеть вас здесь!

нужен а/б тест для определения оптимального времени cum

АБ эксперименты не работают — это миф с логической ошибкой иллюзии контроля

где тестирование регрессий?

прочитал как «где тестирование репрессий» 😔

интересно было бы про это почитать подробнее

готово

в Беларуси

+++ дарю

в Беларуси

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

Извините, здесь сразу в прод, какое тестирование.. 😕

А если речь идет о A/В тестах внутри приложения и нужно узнать о том как та или иная фича влияет на метрики?

А если речь идет о A/В тестах внутри приложения и нужно узнать о том как та или иная фича влияет на метрики?

А если речь идет о A/В тестах внутри приложения и нужно узнать о том как та или иная фича влияет на метрики?

прод в России...

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

согласен, но будто в россии демо версия

Зависит же от фичи ведь)

хотя нет, дев — Узбекистан, стейджинг — Беларусь, Бета — Россия

а в Корее тогда что? :)

можете привести конкретный пример, пожалуйста?

а в Корее тогда что? :)

В игру добавили небольшую метамеханику, был риск отвала игроков, потому что она могла раздражать игрока, либо повысить показатели(хоть и немного), в итоге аб тест показал что фича работает хорошо

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

Но я согласен с утверждением что ценность аб теста повышается с увеличением числа юзеров

> показал что фича работает хорошо По какой метрике и какое изменение указало на "хорошо"?

Целевая местрика - кол-во просмотра рекламы и как результат ARPU

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

Целевая местрика - кол-во просмотра рекламы и как результат ARPU

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

нет вероятности что, внезапно, начали работать лучше пуш-нотификации, которые зазывают людей назад играть?

Конечно нет, но ведь это и не означает что это обязательно повлияло что-то другое?

Нет пушей

что скорее всего повлияло, грубо говоря: это изменение или что-то другое?

Нет пушей

это пример одного из миллиардов факторов

При проверке изменения мы же не меняем в приложении миллиард вещей, а конкретный кейс и все что может повлиять на результат тест - это траффик который приходит и если исходить что с одной рекламной кампании приходит приблизительно похожий траффик, то мы можем получить релевантные данные после их сбора за неделю-две

При проверке изменения мы же не меняем в приложении миллиард вещей, а конкретный кейс и все что может повлиять на результат тест - это траффик который приходит и если исходить что с одной рекламной кампании приходит приблизительно похожий траффик, то мы можем получить релевантные данные после их сбора за неделю-две

При проверке изменения мы же не меняем в приложении миллиард вещей, а конкретный кейс и все что может повлиять на результат тест - это траффик который приходит и если исходить что с одной рекламной кампании приходит приблизительно похожий траффик, то мы можем получить релевантные данные после их сбора за неделю-две

При проверке изменения мы же не меняем в приложении миллиард вещей, а конкретный кейс и все что может повлиять на результат тест - это траффик который приходит и если исходить что с одной рекламной кампании приходит приблизительно похожий траффик, то мы можем получить релевантные данные после их сбора за неделю-две

При проверке изменения мы же не меняем в приложении миллиард вещей, а конкретный кейс и все что может повлиять на результат тест - это траффик который приходит и если исходить что с одной рекламной кампании приходит приблизительно похожий траффик, то мы можем получить релевантные данные после их сбора за неделю-две

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

При проверке изменения мы же не меняем в приложении миллиард вещей, а конкретный кейс и все что может повлиять на результат тест - это траффик который приходит и если исходить что с одной рекламной кампании приходит приблизительно похожий траффик, то мы можем получить релевантные данные после их сбора за неделю-две

Но, на самом деле, мир вокруг вашего приложения не застыл на месте — и хаос мира гораздо сильнее влияет на эту метрику, которую вы указали, чем ваши АБ тесты.

Это, кстати, та же причина, почему люди недооценивают роль удачи в успехе. Людям неприятно осознавать, что от них не особо-то и сильно зависел успех, что им просто повезло.

Так и тут: неприятно осознавать, что АБ тесты просто не работают и дают случайные результаты на недостаточной выборке.

А как понять, какая выборка достаточная?

А как понять, какая выборка достаточная?

https://mindbox.ru/ab-test-calculator/

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

Так и тут: неприятно осознавать, что АБ тесты просто не работают и дают случайные результаты на недостаточной выборке.

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.

Рубрика #мюсли Вам не нужны A/B тесты. У вас они работать не будут. Они работают на гигантских количествах пользователей, а не на вашей тысяче активных ежедневных. Запускать A/B тесты до первого миллиона DAU — это падать жертвой когнитивного искажения иллюзии контроля. Нет, это не баклажан на лендинге увеличил конверсию, это по воле случая Гугл изменил алгоритмы и вам начал идти более целевой трафик. Не тешьте себя мыслями о том, что можете объяснить хаос этого мира. Энтропию не победить, можно только работать вокруг нее.