Мир, в котором можно в реальном времени исправить проблемы в продукте, отличается от мира, в котором нужно предусмотреть все возможные проблемы и где цена ошибки высока.

Представьте себе производство автомобилей. Если предварительных исследований будет недостаточно, это может привести к человеческим смертям, что означает для бизнеса массовый отзыв изделий. В таком случае однозначно необходимо проводить многочисленные исследования перед тем, как запустить продукт в серию. Прототипы самолетов проходят проверку в аэродинамических трубах, а прототипы продуктов быстрого спроса – испытания в фокус-группах.

Но если речь идет о производстве программного обеспечения, которое распространяется онлайн, то здесь цена ошибки может быть меньше, чем стоимость предварительных исследований, а в таком случае проверка «в полях» работает максимально эффективно.

Как мы обсуждали ранее, в лабораторных условиях пользователи ведут себя неестественно и выборки респондентов не всегда репрезентативны. Так что именно релиз в формате smoke-test[54] на репрезентативную долю пользователей может дать статистически достоверный ответ.

Чтобы минимизировать негативный эффект, новую функциональность следует открывать на ограниченное количество пользователей – специальную группу лояльных пользователей, которых называют бета-тестерами.