Test runs что это

TestRail: как сначала подумать, а потом протестировать

Надеюсь, многие из вас знают, что в тестировании тоже есть документация. И вести ее можно по-олдскульному, в xls-файлах да в папочках или же, как настоящие джедаи, использовать специализированный инструмент.
Вот об одном из таких инструментов под названием TestRail, который мы недавно внедрили у себя в TestLab², я и хочу сегодня рассказать. Инструмент оказался настолько удачным, что молчать сил не было и я решил наконец-то сделать что-то полезное для общества.

Для всех проектов, которые мы тестируем, всегда обязательно пишется тестовая документация, от небольшого чеклиста до развесистого test suite с кросс-ссылками и сотнями кейсов. От идеи хранить документацию в локальных файлах отказались сразу и напрочь, это неудобно и просто непрофессионально. Пробовали «универсальное» решение, wiki (DokuWiki), но она не прижилась. Тут сложно сказать почему, пожалуй, дело привычки, и можно было бы «насадить добро палками», но тут подвернулся TestRail и понеслась.

Установка и системные требования

Два варианта: типичный LAMP или «IIS+SQLServer+FastCGI/PHP». Также потребуется ionCube и cURL, но это не редкость. Работает достаточно быстро, а после включения gzip через mod_deflate стало вообще пулей летать.

Основные возможности

Многопользовательская многопроектная система для ведения тестовой документации и учета результатов выполнения тестов. В продукте предусмотрено место для всех: для тест-менеджеров, которых больше интересует «когда будет» и «сколько багов», для простых тестировщиков, которым удобно отчитываться о пройденных кейсах, для аналитиков, которые смогут вгрызаться в самые дебри и выяснять чего ж оно всё так хреновов чем соль.

Как выглядит рабочий процесс

Сравнение с конкурентами

Личные впечатления

Для нас система оказалась практически идеальной и в плане минимально необходимого набора фич, и в плане удобства ежедневного использования. Мы занимаемся аутсорс-тестированием и ведем достаточно много небольших проектов, что отлично ложится в лицензионную политику вендора: лимит ограничивает только количество активных пользователей системы, поэтому мы деактивируем клиентские эккаунты по окончании проектов.
Из недостатков стоит отметить два: в текущей версии TestRail не поддерживает Unicode что означает, что вести документацию на русском/украинском языке в текущей версии без хаков невозможно. Но соответсвующий feature request уже заявлен, должны скоро добавить. Для нашей команды это непринципиально потому, что пока все проекты, достойные попадания в TestRail, ведутся на английском языке.
Вторая проблема — это отсутсвтие какого-то wysiwyg-редактора во всех text edit-полях. Это радует инженеров, но регулярно смущает заказчиков.

Резюме

Если вы ведете тестовую документацию по большому проекту, или уже теряетесь в тоннах doc- и xls-файлов с кейсами — вам стоит обратить внимание на TestRail. Это продукт, который не нужен всем и каждому, но если вы занимаетесь тестированием профессионально, то запомните это название, возможно, TestRail пригодится вам в следующем проекте.

Если будет интересно — я готов развивать тему различных тулов для тестирования и, к примеру, внимательно изучить ту же Testopia, чтобы рассказать вам о ней. Пишите в комменты.

*Умеющие гуглить могут найти в интернетах купоны на скидки.

Источник

Тест раны

«Ран» это от английского Run, а не от русского рана.

В плане обычно написано что и как нужно делать, каких результатов ожидать.

Обычно тест план не содержит детальных инструкций с точностью до каждой величины.

Поэтому у тестировщика есть определённая свобода. Можно задать немного разные значения, выбрать другие элементы меню, дать чуть большую нагрузку.

План один и тот же, а фактические тесты разные. Каждый такой тест это и есть Test Run.

Если во время одного рана тест фейлится а другого нет, есть смысл задуматься о внесении изменений в план, но это ни в коем случае не аксиома.

Пример

Рассмотрим мой тест ран из статьи «Интеграционное тестирование»

Вы можете повторить те же самые действия, но, например, город выбрать другой. Если вы будете делать скриншоты дизайн сайтов может уже поменяться.

Итак, перейдём к примеру:

Допустим, вы тестировщик из Aviasales и хотите проверить как работает интеграция с сайтом Booking.com и заодно убедиться, что отели видно на карте.

Как будет выглядеть ваш тест в упрощённом виде:

Теперь разберём действия пошагово.

Нужно зайти на сайт Aviasales и выбрать какой-то маршрут.

Изображение с сайта Aviasales

Переход на новую страницу осуществлён, но вы по-прежнему на том же сайте.

Нужно нажать кнопку «Найти отели»

Изображение с сайта Aviasales

Изображение с сайта Booking.com

Изображение с сайта Booking.com

После того как вы выполнили все действия и написали отчёт можно сказать, что тест ран завершён.

Надеюсь Вам стало чуть понятней, что такое тест ран

Источник

test run

Смотреть что такое «test run» в других словарях:

test run — UK US noun [countable] [singular test run plural test runs] a process designed to test whether a machine or system works well Thesaurus: general words for tests and testingsynonym * * … Useful english dictionary

test run — UK US noun [C] MARKETING ► if you give a machine, product, process, etc. a test run, you try it to see if it works correctly: give sth/do/conduct a test run »They conducted a test run of the questionnaire before sending it out to their client… … Financial and business terms

test run — test runs N COUNT If you give a machine or system a test run, you try it out to see if it will work properly when it is actually in use. Japan s space ambitions have had a set back after the failure of an engine in a test run. The vote was seen … English dictionary

test-run — ˈtest run noun [countable] an occasion when a new machine, piece of equipment, or procedure is tested to find out whether it works correctly: • Fire during a test run seriously damaged an experimental Japanese supertrain … Financial and business terms

test run — n an occasion when you try doing something or using something before you really need to use it, to make sure everything works properly … Dictionary of contemporary English

test run — UK / US noun [countable] Word forms test run : singular test run plural test runs a process designed to test whether a machine or system works well … English dictionary

test run — kontrolinis bėgimas statusas T sritis Kūno kultūra ir sportas apibrėžtis Klasikinio (būsimųjų varžybų) arba sportinio rengimo uždavinius atitinkančio nuotolio bėgimas praėjus tam tikram sportinio rengimosi laikotarpiui arba prieš pagrindines… … Sporto terminų žodynas

test run — / test rʌn/ noun a trial made on a machine … Marketing dictionary in english

test run — / test rʌn/ noun a trial made on a machine … Dictionary of banking and finance

Test run — Пробный [опытный] тираж … Краткий толковый словарь по полиграфии

Источник

test run

1 test run

2 test run

3 test run

Тематики

Синонимы

пробная эксплуатация
—
[А.С.Гольдберг. Англо-русский энергетический словарь. 2006 г.]

Тематики

серия испытаний
—
[Л.Г.Суменко. Англо-русский словарь по информационным технологиям. М.: ГП ЦНИИС, 2003.]

Тематики

тестовый заезд
[ Департамент лингвистических услуг Оргкомитета «Сочи 2014». Глоссарий терминов ]

test run
pilot run
Another term for pilot run.
[ Департамент лингвистических услуг Оргкомитета «Сочи 2014». Глоссарий терминов ]

Тематики

тестовый запуск
—
[Е.С.Алексеев, А.А.Мячев. Англо-русский толковый словарь по системотехнике ЭВМ. Москва 1993]

Тематики

Тематики

4 test run

backup run — тираж, напечатанный начиная с оборотной стороны

run length — величина тиража, тираж

5 test run

6 test run

7 test run

8 test run

9 test run

10 test run

11 test run

12 test run

13 test run

14 test run

15 test run

16 test run

17 test run

18 test run

19 test run

20 test run

См. также в других словарях:

test run — UK US noun [countable] [singular test run plural test runs] a process designed to test whether a machine or system works well Thesaurus: general words for tests and testingsynonym * * … Useful english dictionary

test run — UK US noun [C] MARKETING ► if you give a machine, product, process, etc. a test run, you try it to see if it works correctly: give sth/do/conduct a test run »They conducted a test run of the questionnaire before sending it out to their client… … Financial and business terms

test run — test runs N COUNT If you give a machine or system a test run, you try it out to see if it will work properly when it is actually in use. Japan s space ambitions have had a set back after the failure of an engine in a test run. The vote was seen … English dictionary

test-run — ˈtest run noun [countable] an occasion when a new machine, piece of equipment, or procedure is tested to find out whether it works correctly: • Fire during a test run seriously damaged an experimental Japanese supertrain … Financial and business terms

test run — n an occasion when you try doing something or using something before you really need to use it, to make sure everything works properly … Dictionary of contemporary English

test run — UK / US noun [countable] Word forms test run : singular test run plural test runs a process designed to test whether a machine or system works well … English dictionary

test run — kontrolinis bėgimas statusas T sritis Kūno kultūra ir sportas apibrėžtis Klasikinio (būsimųjų varžybų) arba sportinio rengimo uždavinius atitinkančio nuotolio bėgimas praėjus tam tikram sportinio rengimosi laikotarpiui arba prieš pagrindines… … Sporto terminų žodynas

test run — / test rʌn/ noun a trial made on a machine … Marketing dictionary in english

test run — / test rʌn/ noun a trial made on a machine … Dictionary of banking and finance

Test run — Пробный [опытный] тираж … Краткий толковый словарь по полиграфии

Источник

Тест раны

«Ран» это от английского Run, а не от русского рана.

В плане обычно написано что и как нужно делать, каких результатов ожидать.

Обычно тест план не содержит детальных инструкций с точностью до каждой величины.

Поэтому у тестировщика есть определённая свобода. Можно задать немного разные значения, выбрать другие элементы меню, дать чуть большую нагрузку.

План один и тот же, а фактические тесты разные. Каждый такой тест это и есть Test Run.

Если во время одного рана тест фейлится а другого нет, есть смысл задуматься о внесении изменений в план, но это ни в коем случае не аксиома.

Пример

Рассмотрим мой тест ран из статьи «Интеграционное тестирование»

Вы можете повторить те же самые действия, но, например, город выбрать другой. Если вы будете делать скриншоты дизайн сайтов может уже поменяться.

Итак, перейдём к примеру:

Допустим, вы тестировщик из Aviasales и хотите проверить как работает интеграция с сайтом Booking.com и заодно убедиться, что отели видно на карте.

Как будет выглядеть ваш тест в упрощённом виде:

Теперь разберём действия пошагово.

Нужно зайти на сайт Aviasales и выбрать какой-то маршрут.

Изображение с сайта Aviasales

Переход на новую страницу осуществлён, но вы по-прежнему на том же сайте.

Нужно нажать кнопку «Найти отели»

Изображение с сайта Aviasales

Изображение с сайта Booking.com

Изображение с сайта Booking.com

После того как вы выполнили все действия и написали отчёт можно сказать, что тест ран завершён.

Надеюсь Вам стало чуть понятней, что такое тест ран

Источник