1. Абстрактный результат — плохо!
Обратите внимание на третий столбик. Хорошо ли, что там повторяется текст?
Чек-лист для формы регистрации — 1
Описание
|
Пример
|
Результат
|
Все поля заполнены правильно
|
Имя — Ольга
Email —
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
Пароль — 1
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие.
|
Проверка поля “Имя”
|
||
Свое имя
|
Ольга
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие.
|
Короткое имя
|
Ян
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие.
|
Длинное имя (составное)
|
Розалинд Аруша Аркадина Алталун Флоренс Луна
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие.
|
...
|
...
|
...
|
Проверка поля “Email”
|
||
Корректный email (популярный домен)
|
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие.
|
Точка внутри email
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие
|
|
Кириллический email
|
олечка@мусики.рф
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие
|
Пустая почта
|
Ошибка
|
|
Одно слово вместо домена
|
olga@fdgfdg
|
Ошибка
|
...
|
Повторение — мать учения.
А копипаста — зло!
Это знает каждый тестировщик. Будем хитрее — вынесем одинаковый текст “за скобку”.
Чек-лист для формы регистрации — 2
Если результат “ОК” → Регистрация прошла успешно, на почту отправлено письмо-приветствие.
Описание
|
Пример
|
Результат
|
Все поля заполнены правильно
|
Имя — Ольга
Email —
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
Пароль — 1
|
ОК
|
Проверка поля “Имя”
|
||
Свое имя
|
Ольга
|
ОК
|
Короткое имя
|
Ева
|
ОК
|
Длинное имя (составное)
|
Розалинд Аруша Аркадина Алталун Флоренс Луна
|
ОК
|
...
|
...
|
...
|
Проверка поля “Email”
|
||
Корректный email (популярный домен)
|
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
|
ОК
|
Точка внутри email
|
ОК
|
|
Кириллический email
|
олечка@мусики.рф
|
ОК
|
Пустая почта
|
Ошибка
|
|
Одно слово вместо домена
|
olga@fdgfdg
|
Ошибка
|
...
|
Какие мы молодцы! И чек-лист написали, и «текст ради текста» выкинули, круто же! Или нет?
Можно ли понять из данного чек-листа, зачем нужны были все эти проверки? Давайте посмотрим, что можно писать вместо абстрактного «ок».
2. Конкретный результат
Логин с длинным именем — проверяем, что имя влезает туда, где оно должно отображаться после регистрации.Логин с русской почтой — проверяем, что на кириллическую почту нормально уходит письмо.
Буква ё в имени — проверяем, что она нормально отображается в письме-приветствии и в личном кабинете: в виде буквы, а не иероглифа.
и т.д.
Мы же не просто так 20 кейсов проверяем, чем-то же они отличаются. Описывайте эту специфику вместо банального "ок".
А результата «не ок» вообще не бывает! Разные ошибки обрабатываются системой по-разному. И это тоже надо отобразить в чек-листе. Иначе как проверяющий поймет, нормальный текст ошибки или не очень? Не всегда очевидно, что там должно быть…
Давайте попробуем конкретизировать проверки.
Чек-лист для формы регистрации — 3
Описание
|
Пример
|
Результат
|
Все поля заполнены правильно
|
Имя — Ольга
Email —
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
Пароль — 1
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие
|
Проверка поля “Имя”
|
||
Свое имя
|
Ольга
|
Успешная регистрация
|
Короткое имя
|
Ян
|
Ограничений на минимальное имя нет
|
Длинное имя (составное)
|
Розалинд Аруша Аркадина Алталун Флоренс Луна
|
В личном кабинете имя отображется нормально, влезает в отведенное под него место
|
...
|
...
|
...
|
Проверка поля “Email”
|
||
Корректный email (популярный домен)
|
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
|
Успешная регистрация
|
Точка внутри email
|
Успешная регистрация
|
|
Кириллический email
|
олечка@мусики.рф
|
На кириллический email ушло письмо
|
Пустая почта
|
Ошибка “Введите email”
|
|
Одно слово вместо домена
|
olga@fdgfdg
|
Ошибка “Введите адрес в формате
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
”
|
...
|
Если ожидаемый результат дублируется — объединяем ячейки в таблице. Так мы избавляемся от лишнего текста, а чек-лист становится легче читать.
Посмотрим на примере email-а.
Чек-лист для формы регистрации — 4
Описание
|
Пример
|
Результат
|
Корректный email (популярный домен)
|
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
|
Регистрация прошла успешно, на почту отправлено письмо-приветствие
|
Корректный email
(корпоративная сеть)
|
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
|
|
Точка внутри email
|
||
Кириллический email
|
олечка@мусики.рф
|
На кириллический email ушло письмо
|
Пустая почта
|
Ошибка “Введите email”
|
|
Одно слово вместо домена
|
olgak@fdgfdg
|
Ошибка “Введите адрес в формате
Этот e-mail адрес защищен от спам-ботов, для его просмотра у Вас должен быть включен Javascript
”
|
Давайте посмотрим на другом примере — подсказки по ФИО.
Вводим данные, система подсказывает.
Выбираем подсказку — заполняются гранулярные поля.
Как будет выглядеть чек-лист с абстрактным результатом?
Чек-лист для подсказок — 1
Описание
|
Пример
|
Результат
|
С какой буквы начинаются подсказки
|
О
|
Выпадает список подсказок
|
Женское имя, распространенное
|
Ольга
|
Имя распознано корректно
|
...
|
||
ФИО
|
Киселева Ольга Евгеньевна
|
Данные разнесены по правильным полям:
|
Смотрится хорошо и правильно… Но что значит “выпадает список подсказок”? Я ввожу букву “О”, а мне выдается список подсказок с первой буквы алфавита — это ок? Нет, не ок, хотя результату соответствует.
Что такое “данные разнесены по правильным полям”? Если я ввела "Киселева Ольга" и Дадата запихала эту строку в отчество, выставив мужской пол — это ок? Нет, не ок. А что тогда ок?
Ответ кажется очевидным, можно отмахаться — тренер/начальник придирается. Но очевиден результат далеко не всегда. Представьте себе, что вы — алгоритм, который определяет, где фамилия, где имя, где отчество. Распределите эти данные:
Константин Семенович Маркович
Саша Савченко
Кенгатаран Урутирарубини
Курувитаге Манори Исанка
Бжадуг Маруан Талал
Гохил Харпалсинх Полубха
Улига Тумэнжаргал
Абдул Вахаб (это все фамилия)
Аслан оглы Назила
Казы Кызы Гулянда
Пан Полина Сон-Деровна
Тен Вова Алексейвич
Кан Рая Николаевна
Нгуен Ту Ань
Нгуен Нгок Лонг
Кожокару Ион Георге
Фан Се Рюн
Давайте добавим в чек-лист конкретики:
Описание
|
Пример
|
Результат
|
С какой буквы начинаются подсказки
|
О
|
Выпадает список имен и фамилий, начинающихся на букву “О”
|
Женское имя, распространенное
|
Ольга
|
В списке подсказок “Ольга” есть. При выборе имени заполняются поля:
|
...
|
||
ФИО
|
Киселева Ольга Евгеньевна
|
В списке подсказок все компоненты есть. При выборе заполняются поля:
|
Выполнить данный чек-лист сможет любой тестировщик — от начинающего до опытного, от знающего каждый кусочек продукта до того, кто впервые Дадату видит.
3. Пустой результат
Если результат писать лень и очень хочется скатиться в абстрактное “ок” — вообще его не пишите. Конкретика нужна не всегда.
Отличный пример чек-листа без результата — для загрузки файлов в Дадату. Почитайте его, нужны ли тут пояснения, примеры, однотипный результат? Нет, не нужны
Итого — когда и какие результаты использовать
Абстрактный — забудьте как страшный сон, особенно «не ок».
Конкретный — когда непонятно, что именно означает «ок» (для каждого пункта результат разный).
Пустой — когда результат превращается в унылую копипасту.
PS — статья написана для моих студентов и добавлена на портал Testbase в навык описания чек-листов, чтобы не потерялась!