понедельник, 1 декабря 2014 г.

JIRA. Обратный отсчет — до релиза осталось...

Мы попробовали у себя на работе подключить JIRA Agile, но как-то не пошла идея... Из всех возможностей мы использовали в итоге только календарик Greenhopper Days Remaining.



Платить много денег за один лишь календарик смысла не имеет, сидеть на триальной версии тоже...

Но без календарика грустно! 
Поэтому мы создали свой (smile)


Он даже умнее! Greenhopper писал большую красную 0, когда время истекало, а наш плагин ищет последнюю незакрытую версию и показывает, на сколько дней мы просрочили выпуск (минус один, минус два и т.д.)

Подключение календарика


1. Создать портлет типа Text



2. В поле "Заголовок" написать "До релиза осталось".
3. В поле HTML вставить

<html>
<style>
h1 { background-color: #e0f0ff;
     color: forestgreen;
     text-align: center; 
     font-size: 15em;
     font-weight: normal;
}
</style>
<body>
<h1 id="toRelease" />
<script language="javascript" type="text/javascript">
var minDate = new Date("2099-01-01");
var today = new Date();
var xhr = new XMLHttpRequest();
xhr.open("GET", "http://jira.hflabs.ru/rest/api/2/project/YourName/versions/", false);
xhr.send();
var versions = JSON.parse(xhr.responseText);
for (i = 0; i < versions.length; ++i) {
    if (new Date(versions[i].releaseDate) < minDate && versions[i].released === false ) {
      minDate = new Date(versions[i].releaseDate);
    }
}
diff = Math.ceil((minDate - today) / (24 * 60 * 60 * 1000));
if (diff < 0) {    
    for (i = diff; i < 0; ++i) {
        date = new Date();
        date.setDate(today.getDate() + i);
        if (date.getDay() === 0 || date.getDay() === 6) {
            diff = diff + 1;
        }
    }     
    diff = diff.toString().fontcolor("firebrick");
}
else {
    for (i = 0; i < diff; ++i) {
        date = new Date();
        date.setDate(today.getDate() + i);
        if (date.getDay() === 0 || date.getDay() === 6) {
            diff = diff - 1;
        }
    }
}
document.getElementById("toRelease").innerHTML = diff;
</script>
</body>
</html>

4. Заменить во фразе "project/YourName/versions/" YourName на название своего проекта.

5. Сохранить и наслаждаться! (smile)

PS - календарик писался на коленке во внерабочее время. Так что код не идеален, но работает же! =)

воскресенье, 30 ноября 2014 г.

Классы эквивалентности для редактирования сообщения



Когда тестировщики узнают о различных техниках тест-дизайна, это добавляет им вдохновения! Ух ты, а тут еще это можно попробовать. И это, и вот это! А еще вот так извернуться, трижды присесть, подпрыгнуть и хлопнуть в ладоши! Smile :)

И это здорово, что получается генерить разные варианты! Но в первую очередь стоит задуматься о простейших сценариях, на которые наткнется пользователь, даже не планировавший что-либо сломать.

Давайте возьмем для примера сайт http://ru.qahelp.net/.
Там можно создавать вопросы и отвечать на них. К каждому вопросу и ответу можно добавлять комментарии.

Я задала своим выпускникам онлайн-интенсива простой вопрос, как мы будем тестировать возможность редактирования ответа на вопрос?

Результаты порадовали (варианты очень интересные):

1. Что я могу редактировать свой ответ.
2. Что я могу открыть для редактирования и передумать, нажать отмену. Должно сохраниться прежнее состояние.
3. Если пишется дата создания ответа, то:
   3.1: Действительно ли такое время и дата. Может быть другой GMT
   3.2: Какая дата после редактирования и сохранения изменений: старая или новая.
4. Не внести изменения и сохранить. Должно остаться прежним. Со временем - как в 3.2
5. Если были комментарии к ответу, то что с ними происходило после 1-4. Должны сохраняться.
6. Проверить что все инструменты для редактирования работают.
7. Ответ может быть "простой" и кем-то откомментированный (тобой же или другим человеком).
8. Открыть для редактирования сразу в 2 вкладках и отредактировать. Проверить синхронность.
9. Открыть одновременно в двух вкладках для редактирования. В первой вкладке выйти из режима редактирования и удалить. Во второй вкладке сохранить редактируемое. Обновить вкладку во втором браузере. Вопрос: останется во второй вкладке или исчезнет?..

Хороший чек-лист, грамотное выделение классов эквивалентности Thumbs up (y)

Но что из этого надо проверить в первую очередь? Если пользователь не стремится специально разломать систему, то для него в первую очередь важно, чтобы кнопка редактирования в принципе работала. А потом уже всякие дата-время, внезапная отмена и прочая-прочая.

Кстати, я не говорю, что внезапная отмена — плохой тест-кейс. Наоборот, отличный! Пользователь может просто передумать, это нормально. И если система себя "странно" поведет, то он очень расстроится.

Но давайте пока временно отбросим эту проверку, отнеся ее к негативным тестам. У нас должна быть возможность редактировать ответ. Отлично! А какой ответ бывает?

  • Свой.
  • Чужой.
Другие варианты разделения на классы эквивалентности?
  • "Простой".
  • Откомментированный.
Можно подумать, что эти классы надуманны, но нет. Потому что именно там и скрывалась ошибка, о которой я недавно сообщила создателю:

********************************************

Шаги для воспроизведения:
1.       Даем ответ на чей-нибудь вопрос.
2.       Просим коллегу его прокомментировать
3.       Нажимаем «редактировать»

Результат
Ничего не происходит Sad :(
См пример тут - http://ru.qahelp.net/question/skolko-tratite-na-samoobrazovanie/

Я не могу исправить очепятку в своем посте, потому что его уже откомментили (если еще не комментировали, то редактирование работает, проверила тут - http://ru.qahelp.net/question/vash-top-5-dokladov-s-sqa-days-vseh-vremen/).

Ожидаемый результат
Открывается форма редактирования.

********************************************

Собственно говоря, нашла эту ошибку я чисто случайно. Заметила у себя опечатку, попробовал отредактировать, а фиг.

Тестировщик во мне сразу заметил, что этот ответ уже успели откомментировать и заподозрил, что проблема именно в этом. Осталось найти другой ответ, который никто не комментил и убедиться в своем предположении. А потом уже написать об ошибке разработчику.

Не просто "аааа, фсе пропало, РЕДАКТИРОВАНИЕ НЕ РАБОТАЕТ НИГДЕ!!!", а грамотно, с локализацией ошибки. На то мы и тестировщики Smile :)

Напоследок хочу сказать, что всегда пробуйте посмотреть на задачу с разных сторон. Сначала с точки зрения пользователя "Что я могу делать? Ага, а какие состояния могут быть у этого элемента, которые могут мне помешать (такие, как комментарий в нашем примере)?".

А потом не вредно посмотреть и с точки зрения тестировщика — "Крушить, ломать! ПО побеждать". Удачи в поисках интересных классов эквивалентности Wink ;)

воскресенье, 23 ноября 2014 г.

Джеф Раскин. Интерфейс


Ссылка на книгу.

Книга обязательна к прочтению для всех разработчиков, тестировщиков и аналитиков. Она показывает, насколько важно хадумываться о usability и чем плохи некоторые "гениальные" решения, такие как постоянные окошки "А вы уверены в том, что хотите это сделать?".

Вначале автор показывает, зачем вообще задумываться об интерфейсе, ведь пользователя только он и интересует:

Пользователи не задумываются над тем, как устроена машина, пока она справляется со своими задачами. [При этом все внутренности значения не имеют]. Для пользователей важнее всего удобство и результаты. Но все, что они видят, — это интерфейс. Другими словами, с точки зрения пользователя именно интерфейс является конечным продуктом.

Потом Джеф переходит к когнитивной психологии и объясняет многие ожидания пользователя через нее.

Возьмем, к пример, то самое окошко "А вы уверены?". Исходная задумка — пользователь, увидев подтверждающее окошко, задумается, а действительно ли он хочет это удалить? Да, действительно, задумывается. Один раз. Или два. А потом у него входит в привычку всегда нажимать "да", даже не глядя на само сообщение.

В результаты вы, не останавливаясь и не проверяя собственное намерение, вводите Y. Таким образом, запрос компьютерной системы, предназначенный служить в качестве меры безопасности из-за привычки становится бесполезным и только усложняет обычный процесс удаления файлов. Все дело в том, что любой запрос о подтверждении, требующий установленного ответа, вскоре становится бесполезным.

Поэтому не надо компостировать пользователям мозг и убрать эти ненужные сообщения. Вместо них лучше сделать простую и удобную процедуру отмены случайного действия. Надо отдать должное MIcrosoft, в последних версиях Windows файлы удаляются без бесполезных подтверждалок.

Также из психологии мы узнаем о локусе внимания. Автор на пример расписывает, как можно использовать это знание. Как это было применено в компьютерах Canon Cat. Ему требовалось около 7 секунд, чтобы выйти из спящего режима, подгрузив всю нужную информацию. Когда пользователь прекращал работу, компьютер сохранял побитовую картинку того, что было на экране. Когда пользователь возвращался к работе, компьютер показывал ему картинку, а сам подгружал все остальное.

Пользователю нужно около 10 секунд, чтобы вспомнить, что он делал в прошлый раз и что нужно сделать сейчас. А компьютеру нужно 7 секунд, чтобы чтобы считать с диска остальную рабочую часть информации. Итог — пользователь счастлив, он думает, что компьютер откликается мгновенно. А лояльность пользователя очень важна для разработчиков "масштабного" ПО!

В книге разбирается огромное количество примеров. Как можно было бы сделать user-frienly поиск, избавиться от рабочего стола, необходимости обязательно придумывать имя для файла...

А знаете ли вы, что текст порою лучше пиктограмм? Раньше были стены текста и добавление туда картинок значительно упрощало восприятие. Но пиктограмм должно быть мало! Сейчас разработчики ушли в другую крайность, убрали почти весь текст, заменив его непонятными картинками.

В итоге к пиктограмма нужно писать расшифровки. А зачем они тогда вообще нужны? Не переходите на крайности, всего должно быть в меру, как текста, так и картинок!

А сообщения для пользователя? Зачем нужны эти ужасные диалоговые окна, в которых есть единственная кнопка "ОК"? Но которые, при этом, мешают пользователю продолжать выполнять свою работу.

В книге описано много полезного. Я думаю, что это обязательный минимум для тех, кто придумывает интерфейс для своего продукта. И ддя тех, кто хочет сделать своих пользователей немного счастливее! Smile :)

А уж тестировщикам так вообще must-read! Не все usability-баги будут править, но теперь, по крайней мере, вы сможете доказать важность отдельных ошибок!

PS - Добавила книгу в общий список прочитанных мною книг.

четверг, 20 ноября 2014 г.

SQA Days 16. День первый


Отгремела 16 конференция по тестированию. И ВАУ, это было круто!

Спасибо организаторам за отличную площадку. на которой они собрали много интересных людей и дали этим людям возможность поделиться собственным опытом и знаниями!

Конференция проводилась в Санкт-Петербурге, в отеле "Park Inn by Radisson Прибалтийская". Там проводится уже вторая конференция и сервис отеля всегда на высоте. На втором этаже есть 3 больших зала и куча места для "поговорить за чашкой чая". Из развлечений - большой телевизор с игрушками, пуфики и конкурсы от Badoo и Wargaming.

А еще первый день вокруг участников бегал мим Smile :)


Но пока хватит об организации. Расскажу немного о докладах, на которых я побывала, это ведь самое интересное!

Доклады


1. Игорь Бондаренко. Слепые SQL инъекции. Достаточно ли хороши ваши тесты?


Игорь рассказывал о разных типах слепых инъекций:
  1. Классическая.
  2. Error based.
  3. Абсолютно слепая.

среда, 19 ноября 2014 г.

Стив Джобс о бизнесе. Под редакцией Алана Кена Томаса


Ссылка на книгу (издательство "Альпина Паблишер")

По названию книги уже понятно, о чем там пойдет речь. Взяли 250 самых интересных (с точки зрения редактора) высказываний создателя Apple и сделали книгу.

Плюсы книги — небольшой объем, два языка (перевод цитаты и оригинал), читается быстро, хорошо подходит для разгрузки после тяжелой для восприятия бизнес-книги.

Также можно использовать для тренировки своего английского — читаешь только правые страницы. Если видишь незнакомые слова, пытаешься перевести сам, а потом читаешь версию редактора.

Особо понравившиеся цитаты:

понедельник, 17 ноября 2014 г.

Развитие интенсива-6

За первые 5 прогонов интенсив сильно изменился. Но мы не останавливаемся на достигнутом, курс продолжает развиваться! 

Сегодня я расскажу об улучшениях, внесенных к шестому интенсиву, тренерам на заметку.

Самая тяжелая для понимания тема интенсива — классы эквивалентности. При выполнении заданий на нее многие студенты жалуются — "Очень сложно. Непонятно, как именно разбивать на классы. Примера из лекции не хватает".

А я как раз закончила читать книгу "Искусство объяснять", и мне пришла в голову гениальная (надеюсь :-) ) идея, как можно рассказать о классах проще. Переделала презентацию и добавила целую кучу примеров! 

Студент с индивидуального курса, учившийся по обоим вариантам, отметил, что новый для гуманитария проще воспринимать. Ура! Smile :)

Еще у нас накопились рекомендации по продолжению обучения после окончания интенсива. Так появилась статья "Что делать после окончания курсов".

Студенты стали задавать меньше вопросов про классы эквиваллентности, но их отзывы показывают, что нам есть куда расти дальше.

Дудник Алексей
Тренинг отличный, но требует много времени. Я не самый сообразительный парень в мире, и мне стабильно требовалось больше 4-х часов в день на ДЗ, так что был незапланированный недосып — работу никто не отменял =) Можно сказать что это не тренинг, а семидневная стажировка с частичной занятостью. Я, конечно, ожидал что будет сложно, но не думал, что будет похоже на работу =) Передавать не только знания, но и рабочую атмосферу — очень продуктивный подход к обучению. Отдельное спасибо Павлу Абдюшеву, который добавил остроты в процесс. Это было утомительно, но замечательно =)

Ханов Дмитрий Викторович, ведущий менеджер отдела маркетинга
Ожидал от тренинга работы, по результатам которой я бы окончательно укрепился (или наоборот) в желании развиваться по профессии тестировщика, "прикоснуться" к циклу разработки ПО на практике и понять, есть ли у меня технический базис и личные качества для успешного развития в данной профессии. Тренинг оказался именно таким, каким я его себе представлял. Тренеры работают с душой, пытаясь заинтересовать и всесторонне осветить профессию с примерами, делятся секретами и полезными инструментами, заставляют думать самостоятельно.

Анонимно
Ожидания полностью совпали с реальностью. Опыт участия в реальном проекте, насыщенная программа обучения, которая включает в себя также подводные камни работы тестировщика, которые ранее не можешь даже представить и многое, многое другое. Огромное спасибо Ольге и Павлу за самоотдачу в ходе этого тренинга. Тем, кто только собирается участвовать, хочу дать совет, на первые три дня тренинга зарезервируете по меньшей мере 3-4 часа на выполнение домашнего задания, — это поможет вам спланировать свое время.  Если вы хотите попробовать себя в этой работе — этот тренинг для вас.

Антонов Виталий Михайлович, на форуме Perfectionist

Что понравилось:
     1.  Придирки к домашним работам. Это полезно, тяжело в учении, легко в бою.
     2.  Подробные, хорошо оформленные комментарии к недочётам в ДЗ от Ольги.
     3.  Терпение и политкорректность Павла.

Не понравилось:
     1.  Ольга несколько раз язвила и саркастично смеялась над моими вопросами.
          Считаю, что для тренера такое недопустимо.
     2.  Сленг в вебинарах ("бага", "копипаста — зло" и т.п.).
          Непрофессионально как-то.
     3.  Очень долго приходилось ждать проверки ДЗ (один раз ждал более суток).
     4.  По ходу курса часто оказываешься в ситуации, когда непонятно,
          что от тебя хотят.
     5.  В понедельник даётся 3 ДЗ, делал его около 8 часов. Лучше разбить на два
          дня. В целом, ритм в течение недели очень рваный: то целый день, как
          проклятый, выполняешь ДЗ, то целый день делать особо нечего, потому что
          ждёшь проверки ДЗ, а новый вебинар уже посмотрел 2-3 раза.

*********************************************
Про сарказм верно подмечено. После перехода на "ты" немного потролила фразу "кнопку регистрации любая обезьяна найдет". Была не права, работаю над собой Smile :).

Над вопросами никогда не смеюсь, много вопросов на курсе — это отлично. Мы как раз стараемся научить студентов задавать правильные вопросы прежде, чем бросаться выполнять задание.

С другой стороны, айтишники часто троллят друг друга в коллективе и используют профессиональный сленг. Когда вы придете на новую работу, никто не будет менять свою манеру речи ради джуниора. Термины типа "баг" и "фича" объясняются в лекциях. А если какое-то слово осталось незнакомым — спросите — глупых вопросов не бывает!

Все, кто сдавал ДЗ по правилам, получали мои замечания быстро. Другое дело, что после меня надо было пройти еще и Павла, который выступал в роли разработчика/ПМ. Это занятые люди, у которых руки доходят разгребать баг-трекер раз в сутки. Нормальная ситуация. Реальные условия. =)

В работе часто бывают ситуации, когда неясно, что надо сделать. Верное решение в такой ситуации... Задавать вопросы! Одно из заданий специально подобрано так, что его невозможно правильно сделать, не уточняя требования.

Последний пункт хорошо показывает ложные ожидания от тренинга.
"Легко? НЕТ! Эффективно? Очень!" © — эти слова недаром стоят в описании тренинга. Вас ждет очень много работы.

Как точно подметил Алексей Дудник, наш тренинг — неделя стажировки с частичной занятостью. Время на выполнение первых заданий сильно зависит от стартового уровня. Кому-то может хватить и двух часов, а кому-то потребуется восемь, но в среднем все справляются за обещанные в правилах 3-4 часа.

Поэтому, пожалуйста, не ждите от интенсива простеньких ДЗ, которые вы легко сделаете за полчасика перед сном. Курс нужен для того, чтобы погрузиться в реальную работу, а не посмотреть развлекательное видео.

Спасибо всем ребятам за пожелания и критику, они помогают сделать курс лучше!

P.S. Следующий курс стартует 24 ноября. Приходите, будет интересно!

Запишитесь сами или отправьте своих junior-ов Wink ;).

P.P.S. Пополнила этой статьей историю развития курса.

понедельник, 10 ноября 2014 г.

Как развивался онлайн-интенсив



В 2013 году я начала обучать студентов основам тестирования индивидуально.

В начале этого года Наталья Руколь придумала новый формат тренингов — неделю интенсивного обучения. Мне понравилась идея, и я создала онлайн-интенсив для начинающих.

Мы погружаем учащихся в реальный проект на неделю. Каждый день они узнают что-то новое, каждый день выполняют домашнее задание, каждый день получают фидбек от тренера. Насыщенная программа позволяет за неделю освоить азы и начать вырабатывать навыки, не растягивая этот процесс на месяцы.

Входные условия для студентов — знание основ теории, которую легко добыть в интернете, например, прочитанная книга Романа Савина "Тестирование dot com или пособие по жесткому обращению с багами". Лекции сделаны короткими, чтобы больше внимания уделить практической части.

Когда я записывала эти лекции, я была очень наивная. Smile :) Выделила из лекций для индивидуального обучения 7 самых перспективных тем, доработала их. И всё, думаю, один раз записала, можно пожинать результаты.

На самом деле постоянно читаемый курс нельзя сделать статичным, потому что появляется новый опыт у тренера, новые идеи, студенты дают фидбэк о том, что им было сложно или скучно делать. Если ничего не менять, то курс можно смело выкидывать на помойку!

Ниже история развития курса "онлайн-интенсив для начинающих тестировщиков".

1. Март

Прошел первый интенсив, и лучшие студенты не дошли до конца. Я была удивлена и спросила их, что не так? Одна из студенток ответила: "Я занималась сплошной бюрократией, от которой пытаюсь сейчас сбежать из бухгалтерии. Сначала тест-кейсы оформи, потом чек-листы, потом снова их проактуализируй. Я уверена, что тестирование более интересное, чем то, что показано в курсе".

С одной стороны, начинающим тестировщикам редко дают интересные задачи, обычно их работа состоит в прохождении тест-кейсов и их составлении. А люди с опытом, которым эта бюрократия давно надоела, занимаются более сложными задачами, радостно спихивая рутину на новичков.
С другой стороны, студентка не доучилась до лекции про поиск и оформление багов. А это и важная, и увлекательная тема.
Надо было что-то менять.

2. Май

Попросила помощи у коллеги Павла Абдюшева, тренера с большим опытом. Мы пересмотрели расписание тренинга и сделали всего одну перестановку — тему баг-трекера подвинули с предпоследнего дня на второй. Курс стал выглядеть так:
  1. Проектирование тестов: когда и как писать тест-кейсы и чек-листы
  2. Поиск, локализация и оформление багов (ранее 5 тема).
  3. Классы эквивалентности и граничные значения.
  4. Как выполнить анализ требований и что делать, когда их нет.
  5. Как найти и проверить всю документацию на проекте.
  6. Зачем нужно регрессионное тестирование и как его оптимизировать.
Оформление багов — довольно сложная тема, если ее начать на второй день, студенты смогут дорабатывать задачи все оставшееся время.

Перестановка дала эффект — курс прошли почти все студенты, и он всем понравился. Так мы решили проблему скуки.

3. Июнь

Теперь, когда отзывы стали хорошие, можно было совершенствовать курс, чтобы студентам было проще/интереснее/полезнее его проходить.

Домашние задания в первый день были простые: 3 тест-кейса на форму регистрации и чек-лист на загрузку файла. Согласна с той студентой, скучно! Так было сделано потому, что на второй день была самая сложная тема — про классы эквивалентности.

После изменения порядка лекций мы добавили сложное творческое задание на тестирование Подсказок.

Проанализировали стандартные ошибки, которые делают начинающие тестировщики при выполнении задания на составление тест-кейсов, я написала подробную статью им в помощь. Там даже двойная регистрация — на тестовый стенд и на сайт — описана; всё как у нас на проекте.

В баг-трекере студенты стали проходить 2 уровня — доброго тренера (меня) и разработчика (Павла), который плохо оформленную задачу просто возвращает как "не баг". Жить студентам стало веселее. Smile :)

4. Сентябрь

Снова интенсивная неделя, и очень довольные обучением студенты. Вроде всё отлично, но...

Мы стали искать себе начинающего тестировщика. Один из лучших студентов курса откликнулся на вакансию и... провалил тестовое задание. Мы попросили сделать задание еще нескольких добровольцев, закончивших интенсив. И снова провал.

Тогда мы поняли, что научили студентов решать задачи, но не научили самому главному — задавать вопросы. Выпусникам мы объяснили смысл этого задания и включили его в обязательную программу.

Это был важный урок, но теперь наш курс стал еще лучше!
Еще мы создали чатик выпускников интенсива, где обсуждаем улучшения курса, делимся интересными ссылками и отвечаем на вопросы наших студентов.

5. Октябрь

Во время решения тестового задания студенты не только не задавали вопросы, они написали всего пару позитивных сценариев. Даже после изучения статьи о важности позитивного тестирования!

Мы пересмотрели лекцию, и поняли, она учила студентов, как ломать, почти не акцентируясь на том, как строить. Пришлось полностью переписать. Smile :)
Добавили примеры позитивных тест-кейсов, идеи, как их придумывать, и как выявлять требования для написания тест-кейсов, задавая вопросы.

К этому интенсиву накопилось много стандартных советов по оформлению багов, записали в виде шпаргалки (ждите публикации в открытый доступ).

Все остались довольны.


P.S. Следующий курс стартует 24 ноября. И у меня еще целая куча идей по его улучшению! Так что приходите, будет интересно!

Запишитесь сами или отправьте своих junior-ов Wink ;)

P.P.S. Пополнила этой статьей историю развития курса.