Бета-тестирование

Все типы тестирования, о которых говорилось раньше, условно можно назвать альфа-тестированием (у разработчиков программного обеспечения может быть немного другая терминология). Стадия альфа, или даже пре-альфа – это когда вы тестируете продукт, которого пока, по сути, нет. На этом этапе тестируются какие-то отдельные части системы и вы отвечаете на частные вопросы.

Затем наступает время бета-тестирования, когда пользователи проверяют весь продукт в целом. Эту стадию можно назвать репетицией. Вы можете позвать на бету тех, кто участвовал в альфа-тестировании. Хорошим решением также будет пригласить специалистов по юзабилити.

Бета-тестирование следует воспринимать как последнюю возможность найти какие-то недочёты, пока не произошёл официальный запуск. Если вы прошли все предыдущие стадии, каких-то серьёзных проблем у вас, скорее всего, не найдётся. После косметических правок продукт можно будет запускать.

Практикум 7. Опробуйте на прототипе

Этот шаг – очень ответственный момент, когда система проходит проверку.

Сначала мы рекомендуем сделать прототип системы на бумаге – это возможно почти всегда. Довольно часто на этом этапе формат задуманной системы меняется практически полностью, неизменной остаётся только суть. Не стоит цепляться за изначальные идеи. Именно для того, чтобы выбрать самые плодотворные из них, и делается прототип.

Затем делается рабочий прототип (или серия прототипов), и через какое-то время наступает очень неприятный иногда момент, когда нужно провести тестирование с участием игроков. Это очень важный этап, и если у вас есть такая возможность, обязательно пройдите его. Ну и, конечно, не забудьте внести изменения после того, как найдёте недочёты сами или вам помогут в этом те, кто будет тестировать игру.

 Создайте прототип (или серию прототипов) для вашего проекта.

 За время подготовки и написания книги мы сделали более десяти прототипов. Стержень этой книги – наш алгоритм 9-О. Мы постоянно тестируем его работоспособность и постепенно меняем. Это один из прототипов, с которым мы экспериментируем и сейчас.

Когда мы запускали краудфандинговую кампанию, у нас было довольно чёткое понимание, какой будет эта книга – ведь у нас уже был суперуспешный курс, и можно было бы просто повторить его в виде текста. Когда мы рассылали «шпаргалку игрофикатора» – выжимку из материалов курса, нам справедливо давали обратную связь о том, что уже этого достаточно для книги, по нынешним меркам. И действительно, «скомстрополить» из этих материалов книгу – задача на несколько дней. Но когда мы сделали очередной бумажный прототип в виде стикеров на стене, то поняли, что формат менять придётся очень сильно – очень уж о многом новом нужно было рассказать.

Когда были написаны некоторые разделы, в необходимости которых мы не сомневались, мы сделали ещё один бумажный прототип и поняли, что разместить их в книге нужно будет совсем в других местах – не в тех, где мы планировали это изначально.

Когда мы написали книгу, прототипом стало получившееся оглавление. Мы решили ещё раз переформатировать книгу – иначе расположить некоторые разделы, заново продумать формат вставок.

После очередного переформатирования мы отдали эту книгу редактору и тем спонсорам нашей кампании на Boomstarter, кто высказал такое желание. Мы очень благодарны этим людям – ведь именно после этого мы поменяли книгу сильнее, чем после любого из предыдущих прототипов. Мы сократили количество глав, удалили некоторые разделы, добавили новые. Также именно благодаря нашим спонсорам появился раздел «Практикум» с примерами, один из которых вы читаете сейчас.

После ещё нескольких прототипов мы провели тестирование почти в формате «размышлений вслух». Когда человек впервые читает книгу при вас, может в любой момент задать уточняющие вопросы, а вы можете наблюдать за выражением его лица – это действительно бесценный, хотя и не всегда приятный опыт.

Отдельно мы тестировали игрофикацию в этой книге, и конечно, после каждого теста мы вносили изменения. В общей сложности по результатам тестирования мы переформатировали эту книгу не меньше пяти раз после того, как она была уже написана.

Может быть, какие-то из этих прототипов вы бы назвали излишней подстраховкой, но мы точно можем сказать, что без них книга получилась бы совсем другой и мы были бы намного меньше довольны результатом.

Весь мир – театр

В театре на первой репетиции актёры просто читают текст по ролям. В каких-то театрах принято, чтобы актёры готовились заранее, а где-то считают, что текст нужно читать с листа.

На этой репетиции можно получить ответы на вопросы: «У кого из актёров слова пьесы звучат органично, как свои?», «Кто подходит для дублирующего состава?», «Нужен ли антракт и в каком месте?» и т. д. Могут быть и ситуативные открытия – один из актёров, например, всё время неправильно называет имя другого персонажа или один из диалогов читается в два раза быстрее, чем предполагал режиссёр.

Между этой версией пре-альфа и заключительной репетицией, которая называется «финальный прогон» или «генеральная репетиция», могут пройти месяцы. И всё равно, несмотря на десятки или даже сотни репетиций, на премьере может выясниться что-то новое.

Например, в одном из московских театров техник, ответственный за то, чтобы на актёров с колосников сыпались блёстки в финале, не оказался на премьере на месте вовремя. На всех репетициях он сидел в зрительном зале и всегда успевал оказаться в нужном месте, но во время спектакля попасть за кулисы со стороны зрительного зала нельзя. Ему пришлось обегать всё кругом, и в итоге он всё равно не успел. Хорошо хоть не упал где-нибудь из-за спешки. Режиссёр сделал выводы, и генеральную репетицию с тех пор проводил, в точности воспроизводя обстановку реального спектакля. А технику пришлось с тех пор наблюдать за понравившейся ему сценой со своей точки.

Скорее всего, вам не понадобится для тестирования вашей игрофицированной системы столько репетиций, сколько нужно в театре. Тем не менее наш театральный опыт говорит, что каждая дополнительная репетиция даёт вам дополнительную свободу и снижает риски. Свобода в данном случае – это свобода импровизации.