
Alexander
17.07.2016
13:49:29
ну не знаю, просто есть куча случаев, когда есть ошибки
и нет тестов

yopp
17.07.2016
13:49:31
самый лучший бетатестер это реальный клиент с реальными задачи
у тебя всегда в софте есть ошибка

Google

yopp
17.07.2016
13:49:46
всегда
100% времени
по этому когда у тебя система отлова ошибок работает хорошо, тебе без разницы есть ли тест
букинг вообще тестов не пишет
они катают на живую. но у них инфраструктура позволяет катать как хочешь, кому хочешь, куда хочешь и чо хочешь
и откатывать сразу
насколько я знаю там в первый день работы заставляют катать в прод

Alexander
17.07.2016
13:51:48
ну, согласен, если там много мелких фич - так , может, и правильно

yopp
17.07.2016
13:51:57
у тебя и должно быть много мелких фич

Alexander
17.07.2016
13:51:58
но что если у тебя 1-3 фичи крупные и связанные друг с другом

yopp
17.07.2016
13:52:05
это ошибка проектирования :)

Alexander
17.07.2016
13:52:06
и ты их пилишь 3 недели

yopp
17.07.2016
13:52:32
3 недели это сейчас огромный срок уже.

Google

Alexander
17.07.2016
13:52:32
ну просто они, допустим, могут работать друг без друга, но бесполезны

yopp
17.07.2016
13:52:47
3 недели это 17 релизов в год

Alexander
17.07.2016
13:52:50
ну, ок, что случилось с вк 3 недели назад?
а 6 недель?

yopp
17.07.2016
13:52:56
это очень медленно

Alexander
17.07.2016
13:53:04
что с ним вообще случилось в последний раз кроме дизайна?

yopp
17.07.2016
13:53:05
8 релизов в год ещё хуже

Alexander
17.07.2016
13:53:06
и когда

yopp
17.07.2016
13:53:19
мир сейчас за ночь меняется
а ты про 3 недели
давление на скорость доставки результат растёт с каждым годом
потому что иначе конкурент может тебя сожрать

Pavel
17.07.2016
13:53:57

ptchol
17.07.2016
13:54:01
Вы ничего толком не рассказали я тока 8 раз в булшит бинго выиграл

yopp
17.07.2016
13:54:03
пока ты там ночные сборки делаешь
это собенно касается сервисов с низким порогом вхождения
когда человек может уйти на конкурента мгновенно
например всякие билетоискалки

Alexander
17.07.2016
13:56:23
я им репортил пару багов https://new.vk.com/bugs?act=show&id=2360125_1
до сих пор не исправлены, похоже

Google

Alexander
17.07.2016
13:56:44
всего-то почти 3 года прошло
или вот, другой, https://new.vk.com/bugs?act=show&id=2360125_7

Pavel
17.07.2016
13:57:39
Может у них релиз раз в 3 года?
И они отказались от ночных сборок как от слишком частых, и используют високосные сборки например.

Alexander
17.07.2016
13:58:58
ну, если клиент может уйти к конкуренту только потому, что конкурент делает релизы раз в день, а ты раз в 3 недели - это какой-то несерьёзный бизнес

yopp
17.07.2016
13:59:22
Високосные сборки

Pavel
17.07.2016
13:59:33
Релизы это лишь инструмент доставки удовлетворения требований клиенту.

Alexander
17.07.2016
14:00:27
ну, если я хоть что-то понимаю в маркетинге, то на многих проектах клиента надо пушить раз в неделю (или даже две), не чаще

yopp
17.07.2016
14:00:32
пока в вилларбио делали ночные сборки и катали релизы раз в месяц, виллабаджо хуйнуло всё в продакшен через три дня, неделю фиксило баги и уже зарабатывает денег

Alexander
17.07.2016
14:00:33
просто иначе это какой-то спам будет
а вот раз в неделю-две можно делать рассылки с новостями

Semyon
17.07.2016
14:00:55
ты правда не слышал про A/B тестирование?

Alexander
17.07.2016
14:01:02
а причём тут оно?

yopp
17.07.2016
14:01:03

Pavel
17.07.2016
14:01:04

yopp
17.07.2016
14:01:09
рассылка на фичи никак не влияет
рассылка это обучение

Alexander
17.07.2016
14:02:29
ну я к тому, что многие пользователи не ждут от сервиса новых изменений каждый день
а многие пользователи вообще консервативны

Google

Alexander
17.07.2016
14:02:43
и вообще не ждут изменений

Pavel
17.07.2016
14:03:12

Alexander
17.07.2016
14:03:45
ну а почему бы им просто не подождать до релиза?

Pavel
17.07.2016
14:03:45
Изменение - это например увеличить контрастность кнопочки "купить" на 35% - и увидеть на тестах что ее стали нажимать на 3% чаще.
А можешь увеличить контрастность на 40% и увидеть что стали нажимать наоборот на 6% меньше. Вот такие изменения тестируются.

Alexander
17.07.2016
14:04:44
ну эти же страницы не час делать
нужно согласовать всё

Pavel
17.07.2016
14:04:56
С кем?

Alexander
17.07.2016
14:05:04
дизайнер, маркетолог, заказчик

Admin
ERROR: S client not available

Pavel
17.07.2016
14:05:31
Маркетолог и есть заказчик, он требует проверить гипотезу как можно быстрее.
И дать ответ уже завтра.

Alexander
17.07.2016
14:07:37
ну, я понимаю, что лучше релизить 1-4 раза в месяц, чем 1-4 раза в год, но когда речь идёт о релизе раз в сутки или чаще - такое ощущение, что кто-то сильно спешит
вручную такой релиз уже не протестируешь

Pavel
17.07.2016
14:08:05
Ну да, зато протестируешь автоматизированно.

Semyon
17.07.2016
14:08:18
а причём тут оно?
а как его проводить, если маркетинг получил 30 килограмм кокаина и придумывает стратегии чаще одного раза в три недели?

Pavel
17.07.2016
14:08:20
Смотря на графики конверсии и посещаемости.

Alexander
17.07.2016
14:10:15
а как его проводить, если маркетинг получил 30 килограмм кокаина и придумывает стратегии чаще одного раза в три недели?
ну, так можно просто кучей их выложить, то есть вот они придумывают что-то там (цвета кнопочек обсуждают/размеры), говорят, если до релиза меньше 1 недели - говорим "сорри, в этом релизе не будет этого, будет в следующем", если больше недели - включаем в релиз, сразу всю пачку тестов, что они там придумали

Semyon
17.07.2016
14:10:36
А в это время твой конкурент уже откатил это изменение как неудачное

Alexander
17.07.2016
14:10:37
ну и релизы делаем, скажем, 2 раза в месяц

Google

Semyon
17.07.2016
14:10:41
а ты его через неделю только выкатишь

Alexander
17.07.2016
14:10:47
ну и что?

Semyon
17.07.2016
14:10:51
действительно

Pavel
17.07.2016
14:11:08
ну и что?
И спустя десятки таких промахов 90% твоих клиентов ушли к конкуренту.

yopp
17.07.2016
14:11:10

Alexander
17.07.2016
14:11:18
чтобы собрать данные - нужны не часы, а дни

yopp
17.07.2016
14:11:22
потому что тестировать надо ровно одно конкретное изменение

Alexander
17.07.2016
14:11:32
вот как раз 2 недели - нормальный срок для теста

Pavel
17.07.2016
14:11:36

yopp
17.07.2016
14:11:40
потому что если на странице поменялось куча всего, ты хуй узнаешь что конкретно повлияло

Alexander
17.07.2016
14:11:58
так А/Б тесты - это 1 изменение за раз

ptchol
17.07.2016
14:11:59

yopp
17.07.2016
14:12:00
бетатестеры?

ptchol
17.07.2016
14:12:14
Есть понятие фиче тоджлес

Alexander
17.07.2016
14:12:24
то есть у нас 3 теста на 1 странице (два варианта в каждом) - значит, страниц будет 6
а не 2
то есть тесты идут относительно базовой страницы
ну и через неделю-две мы меняем эти тесты

Ivan
17.07.2016
14:13:18

Alexander
17.07.2016
14:13:20
если нам что-то не нравится и мы хотим откатить тесты - мы можем сделать это без релиза
просто перенаправляем весь трафик на нужную страницу