Учитесь задавать вопросы!

— Бери лопату и копай!
— Есть, капитан!

На собеседовании я даю кандидатам задачу с подвохом. В ней специально опущена часть требований. Я хочу посмотреть, будет кандидат задавать вопросы или бросится сразу копать яму писать тесты.

8 кандидатов из 10 начинают писать тесты и даже отмахиваются от моих ненавязчивых подсказок:
— А я Заказчик, можете задавать мне вопросы.
— Да зачем? Все понятно же! Сейчас напишу...

Это должно показать кандидата с лучшей стороны, вон какой старательный, вон как быстро может тестов придумать. Но это не так.

Придумать десяток тестов — легко.
Придумать десяток правильных тестов — намного сложнее.

Правильные тесты проверяют ровно то, что нужно. Ничего лишнего из того, что мы додумали по исходной постановке задачи, не уточнив правдивость своих размышлений.

Зачем все это нужно?

Думаете, мы просто издеваемся над кандидатами, а в реальной жизни такого не бывает? Как раз наоборот!

Всё просто. Заказчик находится внутри контекста своей проблемы и думает, что все знают то же, что и он.

Отличный пример был в летней школе тестировщиков в виде ролевой игры.

Заказчику надо решить конкретную проблему — сотрудников в фирме много, он не помнит все дни рождения и прочие важные даты. И хочет, чтобы исполнитель сделал систему, которая будет оповещать его об:

• отпусках (письмо за неделю до отпуска и в первый день);
• днях рождения;
• юбилеях (юбилей сотрудника + стаж его работы в компании).

Заказчику не придет в голову говорить "У меня уже есть форма создания, редактирования, просмотра и прочее, мне нужны просто письма", — он об этом знает и считает, что все знают.

Более того, Заказчик не будет говорить о том, что у него, кроме русских, есть китайцы и корейцы, он ведь об этом знает — исполнитель тоже должен знать! Или выяснять.

Разработчики не стали ничего уточнять и пошли решать проблемы, которые давно решены. Они продумали форму создания нового сотрудника и ее редактирования (которая у Заказчика уже есть и менять он ее не будет). Зато забыли про часть исходных требований, проигнорировав стаж работы сотрудника в фирме или второе письмо про отпуск.

Задача тестировщика — выяснить, что действительно нужно Заказчику.

Как выяснять?

Задавайте вопросы. Тестировщик должен понимать:

• Какие данные есть на входе?
• Какие данные должны быть на выходе?
• Как эта штука должна работать? 

Пример

Задача простейшая – проверить загрузку файла. Принимаемые форматы — Excel, csv. Нажимаем на кнопку “Выбрать файл”, загружаем файл, и по его данным сервер строит отчет. Данные представляют собой табличку: первая колонка — ФИО поставщика, потом телефон.

Уже можно бросаться писать чек-лист? НЕТ!

Сначала надо выяснить, что от нас требуется проверить, и какие данные есть на входе.
Обратимся к Заказчику:

— А что происходит с содержимым файла после загрузки?
— Данные о поставщиках сохраняются в базу, по ним потом будут строиться отчеты.

Ага, есть некая база с поставщиками, отлично! Это наводит на новые мысли и появляются новые вопросы:

— Что будет, если такой поставщик уже есть в базе?
— Неважно, дубли будем схлопывать потом, в следующей итерации.
— А если вместо ФИО или телефона передан беспорядочный набор символов?
— В следующих релизах будем с этим разбираться. Пока сохраняем как есть.

Важное замечание, иначе тестировщик может кинуться проверять десятки негативных тестов "что можно ввести в эти поля", которые не имеют смысла.

Ок, на выходе у нас ровно то, что и на входе, без дополнительных проверок, удаления мусора и прочего. А что у нас на входе? Достаточно ли данных?

— ФИО лежит в одной ячейке или в разных?
— В одной, всегда в первой.
— Телефон может быть только один?
— Нет, сколько угодно, вторая и последующие ячейки записываются как телефоны.
— Ограничение на их количество есть?
— Планируется, что их будет 1-2 в основном, но ограничения нет.
— Значит, первая ячейка в таблице - это ФИО, потом идут телефоны?
— Да, все верно
— Получается, что в файле нет "шапки" с комментарием, что в какой колонке хранится?
— Хм, да... Точно! Надо сделать так, чтобы первая строка вообще игнорировалась, пусть там будет комментарий
-—Данные могут быть только на одном листе excel файла или на разных?
-—Только на одном.

Уточним еще и ограничения на формат файла:

— Какие форматы excel-файлов должны поддерживаться?
— Все xls и xlsx.
— А в csv-файлах какие будут разделители?
— Любые — запятые, точки с запятой, "бомбочки" (ALT+0164 = ¤)...
— Хорошо, спасибо!

Вот теперь можно начинать тестировать 

См также:

Как правильно задавать вопросы, если ты начинающий айтишник

How to ask good questions

How To Ask Questions The Smart Way