A/B тестирование - единственный путь делать ваше #приложение, сервис, да что угодно лучше. Правда размер выборки для этого должен быть соответствующий.

Интересный кейс от #DuoLingo (это приложение для изучения языков). Одно из упражнений - нужно расставить слова в правильном порядке на изучаемом языке, чтобы смысл был тот же, что написан на уже известном вам. Например написано "Я люблю есть печеньки" и английские слова. to cookies I eat like.

Кажется, что, заглавная буква в первом слове - баг. Но #A/B тест показал, что если убрать заглавную букву, то D1 #retention (метрика, показывающая, сколько человек вернулись в приложение на следующий день) проседает на 0.5%. Кажется не большая цифра, но на объеме в 20+ млн. пользователей это сотни тысяч человек.

К сожалению, невозможно сделать так, чтобы каждая внедряемая фича обязательно улучшала ваш продукт. Все изменения необходимо измерять и отслеживать. Конечно, для сколько-нибудь правдивой оценке необходимы большие данные, но уметь это делать желательно уже сейчас. http://bit.ly/2Qg4geU