Към съдържанието
Качество и тестване16 мин

Отвъд щастливия път: как да проектираме тестовите сценарии, които наистина откриват грешки

От · съосновател и Chief Executive Officer на Hábil ·

Кои тестови сценарии носят стойност, кои почти винаги се забравят и метод стъпка по стъпка: граници, състояния, време, повторни опити, права и още.

Илюстративен сценарий. Една търговска верига пуска в петък новия си процес за покупка. Всички тестове минават: клиентът избира продукт, плаща с карта, получава потвърждението си. В понеделник поддръжката има три оплаквания, които никой не е бил видял. Един клиент е платил два пъти, защото телефонът му е загубил сигнал и той е натиснал отново „Плати“. Поръчка от 23:58 на 31 декември е записана с датата на следващата година. А купон „само веднъж на клиент“ е използван четири пъти, от четири раздела, отворени едновременно.

Нито една от тези три грешки не е била скрита. И трите са били извън щастливия път: маршрутът, в който всичко минава добре, потребителят прави очакваното и всяка система отговаря навреме. Това е първият сценарий, за който всички се сещаме, и обикновено е единственият, който се тества в дълбочина.

Тази статия е за онези, които отговарят за това, което се случва в понеделник: ръководителите на QA и на разработката. Тя обяснява кои категории сценарии си струва да се покрият, кои почти винаги се забравят —с конкретен пример за всяка от тях— и метод стъпка по стъпка за откриване на фините сценарии, без да зависите от вдъхновението на деня. В края има списък, който можете да копирате в следващата си потребителска история.

Ако ви интересува другата половина от темата —какви видове тестове има и защо едно зелено табло не гарантира нищо—, свързаната статия е „Тестове, които наистина хващат грешки“.

Добрият сценарий не е този с най-много случаи

Cem Kaner, професор във Florida Institute of Technology, написа през 2003 г. една от най-полезните дефиниции за това, какво прави един тестов случай добър [2]. Сред неговите критерии три служат за ориентир:

  • Мощен: има по-голяма вероятност да разкрие грешка, ако грешката е там.
  • Значим: ако открие проблем, някой с влияние би протестирал, ако не бъде отстранен.
  • Правдоподобен: който пише кода или взема решението, го приема като нещо, което наистина може да се случи.

Kaner цитира фразата, с която се отхвърля един неудобен сценарий: „никой не би го направил“ [2]. Това е фразата, заради която най-много грешки стигат до продукцията. Клиентът, който натиска „Плати“ два пъти, не е рядкост: той е всеки човек със слаб сигнал. Когато един сценарий се отхвърля с тази фраза, си струва да се попита колко пъти на ден се случва в реалния живот, а не дали звучи странно на срещата.

Вторият ориентир е рискът. Официалната учебна програма на ISTQB —международната организация, която сертифицира специалисти по тестване— определя нивото на риска като комбинация от вероятност и въздействие, а при количествения подход го изчислява като тяхното произведение [1]. Сценарий, който рядко се проваля, но струва много (двойно таксуване), заслужава повече внимание от такъв, който се проваля често, но не струва нищо (неправилно подравнен текст).

Категории тестови сценарии

Практичен начин да не се забрави нищо е да се обходят категории. Всяка задава на системата различен въпрос.

Категории тестови сценарии
КатегорияВъпросът, който задаваКратък пример
Щастлив пътРаботи ли, когато всичко минава добре?Покупка с валидна карта и доставка до дома
ГранициКакво става точно на ръба на едно правило?Безплатна доставка от $1,000: тествайте $999.99 и $1,000.00
ОтрицателниОтхвърля ли добре онова, което трябва да отхвърли?Изтекла карта, пощенски код, който не съществува
ЕдновременностКакво става, ако две неща се случат едновременно?Двама души запазват последния артикул в една и съща секунда
Състояние и редСпазва ли последователността? Какво става, ако се пропусне стъпка?Отмяна на поръчка, която вече е излязла от склада
Време и часова зонаКакво става при смяна на деня, месеца, годината или часа?Поръчка в 23:58 на 31-дек
Мръсни данниИздържа ли на онова, което хората наистина пишат?Фамилно име с апостроф, име с диакритични знаци или емотикони
Недостъпни интеграцииКакво става, ако другата система се забави или не отговаря?Платежният шлюз отговаря след 40 секунди
ПраваВсеки ли вижда и прави само своето?Смяна на номера на поръчката в URL адреса и преглед на поръчката на друг клиент
Идемпотентност и повторни опитиДава ли повторението на една и съща заявка същия ефект само веднъж?Клиентът натиска „Плати“ два пъти
Качество на употреба и експлоатацияОстава ли използваема и достъпна и спазва ли целевото време при очакваното натоварване?Човек, който ползва само клавиатура, завършва плащането; 500 едновременни покупки не надхвърлят уговореното време

Щастливият път е първи, защото ако се провали, нищо друго няма значение. Но той е един ред от единайсет. Последният не се покрива с тази статия: производителността, достъпността и сигурността имат свои специализирани тестове, а тук е достатъчно да се извлекат от тях сценариите за всяка история.

Сценариите, които почти винаги се забравят

1. Точната граница

ISTQB обяснява, че анализът на граничните стойности съществува, защото който програмира, най-често греши по краищата: реализираната граница се оказва едно място нагоре или надолу от поисканото или изобщо не се реализира [1]. MITRE, организацията, която поддържа международния каталог на слабостите в софтуера (CWE), има отделна позиция за тази грешка: off-by-one, „едно повече или едно по-малко“ [11].

Сценарий (ритейл). „Безплатна доставка при покупки от $1,000“. Количка от точно $1,000.00 има ли безплатна доставка? Ако кодът казва „по-голямо от“ вместо „по-голямо или равно на“, няма. Тества се с $999.99 (не се прилага) и $1,000.00 (прилага се). ISTQB нарича това анализ на две стойности; този на три стойности тества границата и двамата ѝ съседи: $999.99, $1,000.00 и $1,000.01 [1].

2. Две неща едновременно

MITRE има друга позиция за онова, което става, когато два процеса използват един и същ ресурс, без да се координират: състезателното условие (race condition) [10]. Почти никога не се появява при ръчните тестове, защото един човек прави едно нещо наведнъж.

Сценарий (ритейл). Купонът „веднъж на клиент“. Системата проверява „използвал ли го е вече?“, отговаря, че не, и го прилага. Ако четири раздела питат в същия миг, и четирите получават „не“, преди някой да го отбележи като използван. OWASP, отворената фондация за сигурност на приложенията, включва в ръководството си за тестване конкретен случай за ограниченията за това колко пъти може да се използва една функция и друг за времето на изпълнение на процеса [4].

Как се тества: няколко еднакви заявки, изпратени паралелно, а не една след друга.

3. Редът и преките пътища

ISTQB предлага поведението да се моделира като диаграма на състоянията: възможни състояния, събития, които ги променят, и условия, които го позволяват. Предимството ѝ пред диаграмата е таблицата на състоянията, която показва и невалидните преходи: празните клетки [1]. Всяка празна клетка е решение, което някой трябва да вземе, и тест, който някой трябва да изпълни.

Сценарий (логистика). Една пратка минава през създадена → събрана → в транзит → доставена. Какво става, ако събитието „доставена“ пристигне преди „в транзит“, защото куриерът е имал слаб сигнал и телефонът му е изпратил събитията разбъркано? А ако „отменена“ пристигне, когато вече е „доставена“? OWASP има и случай за заобикаляне на стъпки от потока [4]: ако системата приеме потвърждението, без да е минало през плащането, потокът е изложен на злоупотреба.

4. Часовникът

Сценарий (застраховане). Една полица изтича „на 31 декември“. В 00:00 или в 23:59:59? По чие време? Ако сървърът записва часа в UTC (универсалното време), а Мексико Сити е шест часа назад, щета, обявена в 19:00 на 31 декември в Мексико Сити, на сървъра вече е 1 януари.

Факт, който е добре да се има предвид: Мексико Сити вече не сменя часа. Законът за часовите зони е оставил сезонното време само за общините от северната граница, а Мексико Сити не премества часовника от 30 октомври 2022 г. [13]. Система, която все още изважда или добавя един час през април и октомври, греши, и само тест с тези дати го открива.

Дати, които е добре да се тестват винаги: последната секунда на деня, на месеца и на годината; 29 февруари; и, ако обслужвате други държави, датите на смяна на часа във всяка от тях.

5. Данните, които хората наистина пишат

Patrick McKenzie публикува известен списък с погрешни допускания за имената на хората; първото е, че всеки човек има точно едно канонично пълно име [9]. Всички допускания от списъка му са погрешни, казва той, и всяко може да се превърне във валидиране или екран, който оставя навън реален човек. Съществува и публичен списък от текстови низове, които често чупят системите —специални знаци, празни текстове, емотикони, текстове на други азбуки—, предназначен да се ползва като тестови данни [12].

Сценарий (банки). Една клиентка се казва María José O'Connor Núñez. Апострофът чупи заявката, „ñ“ се записва като „Ã±“ и извлечението от сметката излиза с име, което банката не може да съпостави с документа ѝ за самоличност.

6. Другата система, която не отговаря

Принципите на инженерството на хаоса, публичен манифест на практиката, предлагат умишлено да се въвеждат събития от реалния свят: сървъри, които падат, дискове, които отказват, мрежови връзки, които се прекъсват [6]. Авторите им предпочитат да експериментират в продукция, със защитни мерки. Без да се стига дотам, можете да изпробвате в контролирана среда какво прави вашата система, когато една зависимост се бави, връща грешка или никога не отговаря.

Сценарий (ритейл). Платежният шлюз се бави 40 секунди. Вашата система се е отказала на 30-ата секунда и е показала на клиента „грешка“. Но шлюзът е таксувал. Кой предупреждава клиента? Поръчката съществува ли, или не?

7. Да видите данни, които не са ваши

OWASP публикува на всеки няколко години списъка си с десетте най-важни риска за уеб приложенията. В изданието от 2025 г. на първо място е нарушеният контрол на достъпа. В множеството приложения, които OWASP е анализирала с данни, предоставени за това издание, всички са показали някаква форма на тази грешка [5]; това не е процент, който може сам по себе си да се пренесе върху произволно портфолио, но казва много за това колко е разпространена.

Сценарий (застраховане). Агентката А отваря …/polizas/1043. Сменя номера в адреса на 1044 и вижда полицата на клиент на агентката Б. Екранът „работи“: в менюто не липсва никакво право. Липсва проверката от страна на сървъра.

Как се тества: всеки важен сценарий се повтаря с друг потребител: един без сесия, един от друг отдел и един с по-малко права.

8. Същата заявка два пъти

В своята техническа библиотека AWS (облачното подразделение на Amazon) твърди, че операциите с ефекти не са безопасни за повторение, освен ако не са идемпотентни: тоест да гарантират, че ефектът се случва само веднъж, независимо колко пъти се повтори опитът [7]. Stripe, платежна платформа, документира как го решава: клиентът изпраща ключ за идемпотентност с всяка операция и повторението му не изпълнява две пъти една и съща операция; точният отговор, който получава, зависи от версията на API-то му [8]. IETF, организацията, която пише стандартите на интернет, поддържа активна чернова за заглавката Idempotency-Key; все още не е стандарт [3].

Сценарий (банки). Един превод е изпратен, мрежата прекъсва преди отговора и приложението повтаря опита по своя инициатива. Получава ли получателят един превод или два? Този сценарий не се открива, като се натисне бутон два пъти спокойно: открива се, като се прекъсне връзката точно след изпращането.

Методът: как да открием фините сценарии

Вдъхновението помага, но споделеният метод прави проектирането на сценарии повторяемо. Тези седем техники помагат да се открият тестови условия. За да се превърне всяко условие в случай, който някой може да изпълни утре, отбележете и предусловието, данните, събитието или заявката, очаквания резултат и състояние, средата, доказателството и кой го тества [1][2]. Пет от тях са в официалната програма на ISTQB (стъпки 2 до 5 и 7) [1]; първата идва от общността на Cucumber [15], а шестата има изследователска подкрепа от NIST [14].

Стъпка 1 · Започнете от правилата, не от екраните. Example Mapping (картографиране на примери), методът на Matt Wynne, съосновател на Cucumber, подрежда разговора за една история върху карти в четири цвята [15]: историята в жълто, всяко правило в синьо, примерите на всяко правило в зелено и въпросите, на които никой не знае да отговори, в червено. Има правила, толкова очевидни, че не се нуждаят от пример, казва Wynne [15]; за останалите едно правило без конкретен пример изисква да се потвърди как ще се проверява и какъв е очакваният му резултат. Една червена карта е сценарий, който някой щеше да открие в продукция.

Стъпка 2 · Разделете данните на групи, които се държат еднакво. Това е разделянето на класове на еквивалентност: ако една стойност от дадена група открива грешка, всяка друга от същата група също би я открила, така че е достатъчна по една на група [1]. За възраст за сключване на застраховка от 18 до 70 години: под 18, от 18 до 70, над 70. И една често пренебрегвана група: онова, което не е възраст (празно, текст, отрицателно число).

Стъпка 3 · Тествайте краищата на всяка група. Анализът на граничните стойности се прилага към подредени групи. С две стойности се тества границата и съседът ѝ от съседната група: 17 и 18, 70 и 71. С три — границата и двамата ѝ съседи [1].

Стъпка 4 · Когато няколко условия решават заедно, направете таблица. Таблицата на решенията поставя на редове условията и действията, а на колони — всяка комбинация [1]. Пример: „Редовен клиент? Покупка над $1,000? Плаща с картата на фирмата?“. Три условия „да или не“ дават до осем комбинации. За всяка дефинирайте очаквания резултат, включително отхвърляне или бездействие; ако не можете да го дефинирате, има висящо бизнес правило.

Стъпка 5 · Нарисувайте състоянията и решете за всяка празна клетка. Диаграмата на състоянията и нейната таблица [1]. Всяка празна клетка поставя решение: ако това събитие пристигне в това състояние, системата трябва ли да го отхвърли, да го пренебрегне, като остави следа, или да приложи друго правило? Тествайте по един невалиден преход на случай, за да не прикрива една грешка друга, и проверете отговора, крайното състояние и онова, което не е трябвало да се промени.

Стъпка 6 · Тествайте по двойки, а не всички възможни комбинации. NIST, институтът за стандарти на Съединените щати, съобщава, че много известни откази включват един или два параметъра, а тези, които изискват три или повече, са все по-редки [14]. Затова си струва да се започне с покритие по двойки (по две), за да се намали броят на тестовете, и да се премине към три или повече променливи, когато анализът на риска го изисква; никое от двете не замества правилата, границите и тестовете за сигурност. NIST публикува безплатен инструмент за генериране на тези комбинации — ACTS [14].

Сценарий (ритейл): процесът на плащане има четири променливи с по три възможности: начин на плащане (карта, превод, в брой в магазина), доставка (до дома, вземане от магазина, куриерска фирма), тип клиент (нов, редовен, фирма) и устройство (уеб, Android, iOS). Всички комбинации дават 3 × 3 × 3 × 3 = 81 теста. С 9 добре подбрани теста всяка двойка възможности се покрива поне веднъж. (Проверено с ортогонален масив от девет реда: шестте двойки променливи се покриват с деветте им комбинации.) Това показва покритие по двойки; не замества случаите с три или повече променливи, когато рискът го изисква.

Стъпка 7 · Предвиждайте грешки методично и провеждайте изследователско тестване в определено време. ISTQB признава две техники, основани на опита, които допълват предишните: предвиждането на грешки —очакване на откази според това как приложението е отказвало преди и според типичните грешки на онзи, който програмира— и изследователското тестване, при което се проектира, изпълнява и оценява едновременно [1]. Една изследователска сесия е ефективна, когато има определено време, записана цел —например „да злоупотребим с купона, валиден веднъж на клиент“—, бележки за онова, което е опитано, и приключване, при което се решава кои находки стават постоянни тестове [1]. Категориите от тази статия са, точно, списък за предвиждане на грешки.

И накрая, подредете по риск. Вероятност по въздействие [1]. Не всички сценарии струват еднакво, а и времето ви не е безкрайно.

Списък за следващата ви потребителска история

ISTQB препоръчва всяка точка от един контролен списък да може да се проверява отделно и директно, да не е прекалено обща, и предупреждава, че един списък губи сила с времето, когато екипът се научи да избягва тези грешки; затова е добре да се актуализира [1]. Този е нашият, за копиране и нагласяне. Всяка отметка се поставя само когато има очакван резултат и доказателство:

СЦЕНАРИИ — история: ____________________ [ ] Щастлив път: изпълних основния маршрут от край до край и записах очаквания резултат.[ ] Граници: за всяко подредено правило тествах границата и съседа от всяка страна, с очакван резултат.[ ] Отрицателни: тествах празно, невалиден формат и извън диапазона; системата отхвърля и казва какво да се поправи.[ ] Едновременност: пуснах N едновременни заявки на една и съща операция и проверих ограничението в записаните данни.[ ] Състояние: за всеки приоритизиран невалиден преход записах събитие, начално състояние, отговор и крайно състояние.[ ] Преки пътища: опитах последната стъпка без предишните и сървърът я отхвърли.[ ] Време: тествах края на деня, на месеца и на годината, 29 февруари и часовата зона на потребителя.[ ] Реални данни: тествах диакритични знаци, ñ, апострофи, емотикони, много дълги текстове и интервали в началото или в края.[ ] Зависимости: симулирах забавяне, грешка и мълчание на всяка критична зависимост; проверих чакане, известие и възстановяване.[ ] Права: тествах критичния ресурс без сесия, с недостатъчна роля и с друг клиент; сървърът отхвърли.[ ] Повторни опити: повторих операцията със същия ключ за идемпотентност; имаше един-единствен ефект.[ ] Употреба и експлоатация: определих задачата, помощната технология или натоварването и измеримия критерий за приемане.[ ] Ако е приложимо — валута и държава: тествах формат, закръгляне, валута и зона на целевия пазар.[ ] Ако е приложимо — миграция и конфигурация: тествах предишни данни, връщане назад и всеки флаг, който променя правилото.[ ] Ако е приложимо — съхранение и изтриване: проверих изтриване, законово съхранение, резервни копия и последващ достъп.[ ] Риск: подредих сценариите по вероятност × въздействие.[ ] Отворени въпроси: всеки има очаквано решение, отговорник и дата; без това не се отбелязва като тестван.

Откъде да започнете

  1. Вземете най-рисковата потребителска история от следващия си спринт —онази, която движи пари, лични данни или наличности— и направете с екипа си картографиране на примери от 25 минути.
  2. Приложете горния списък към тази история. Всяка отметка без отговор е нов сценарий или въпрос към онзи, който определя бизнес правилата.
  3. Автоматизирайте първо сценариите за повторни опити, права и едновременност. Те са тези, които човек почти никога не възпроизвежда на ръка, и които струват най-много, когато се провалят.
  4. Запазвайте всяка грешка от продукцията като нов сценарий. Така списъкът ви се учи от онова, което вече ви се е случило, а това е основата на предвиждането на грешки [1].

Какво прави Hábil

Добре тестваният щастлив път е основата, не таванът. В Hábil, като част от разработката по поръчка, помагаме да се проектират и автоматизират доказателствата за критичните ви потоци —плащания, поръчки, полици, пратки— според риска им: граници, състояния, повторни опити, права и зависимости. Когато контекстът позволява, ги валидираме с реалните интеграции, със sandbox или с представителна среда. А в Hábil MDW, нашата интеграционна платформа, повторните опити са проектирани от самото начало да не повтарят ефекта —повторено плащане не води до второ таксуване— и всеки поток се тества със сценариите на своя риск.

Първият разговор е безплатен: започва с една ваша потребителска история и със сценариите, които я защитават днес. Пишете ни в WhatsApp.

Проверени на 20 ноември 2026 г. Всеки източник е отворен и прочетен в оригиналния си вид; № 3 е работен проект на IETF, а не стандарт.

Източници

  1. ISTQB, Certified Tester Foundation Level Syllabus v4.0.1 (2024-09-15), раздели 4.2.1–4.2.4, 4.4.1–4.4.3 и 5.2. https://istqb.org/wp-content/uploads/2024/11/ISTQB_CTFL_Syllabus_v4.0.1.pdf
  2. C. Kaner, What Is a Good Test Case?, Florida Institute of Technology (2003). https://kaner.com/pdfs/GoodTest.pdf
  3. IETF, The Idempotency-Key HTTP Header Field, чернова draft-ietf-httpapi-idempotency-key-header-08 (чернова, не стандарт). https://datatracker.ietf.org/doc/draft-ietf-httpapi-idempotency-key-header/
  4. OWASP, Web Security Testing Guide v4.2, 4.10 Business Logic Testing (Test for Process Timing, Test Number of Times a Function Can Be Used Limits, Testing for the Circumvention of Work Flows). https://wstg.owasp.org/v4.2/4-Web_Application_Security_Testing/10-Business_Logic_Testing/
  5. OWASP, Top 10:2025 — A01 Broken Access Control. https://owasp.org/Top10/2025/A01_2025-Broken_Access_Control/
  6. Principles of Chaos Engineering. https://principlesofchaos.org/
  7. AWS Builders' Library, Timeouts, retries, and backoff with jitter. https://aws.amazon.com/builders-library/timeouts-retries-and-backoff-with-jitter/
  8. Stripe, Idempotent requests (документация на API-то). https://docs.stripe.com/api/idempotent_requests
  9. P. McKenzie, Falsehoods Programmers Believe About Names (2010). https://www.kalzumeus.com/2010/06/17/falsehoods-programmers-believe-about-names/
  10. MITRE, CWE-362: Concurrent Execution using Shared Resource with Improper Synchronization. https://cwe.mitre.org/data/definitions/362.html
  11. MITRE, CWE-193: Off-by-one Error. https://cwe.mitre.org/data/definitions/193.html
  12. M. Woolf, Big List of Naughty Strings. https://github.com/minimaxir/big-list-of-naughty-strings
  13. Diario Oficial de la Federación, Ley de los Husos Horarios en los Estados Unidos Mexicanos (28 окт. 2022 г.). https://dof.gob.mx/nota_detalle.php?codigo=5670045&fecha=28/10/2022 · Вторична проверка: timeanddate.com, Time changes in Mexico City („Last change: 2022 Oct 30“). https://www.timeanddate.com/time/change/mexico/mexico-city
  14. NIST, Automated Combinatorial Testing for Software („most software bugs and failures are caused by one or two parameters, with progressively fewer by three or more“). https://csrc.nist.gov/projects/automated-combinatorial-testing-for-software
  15. M. Wynne, Introducing Example Mapping, Cucumber. https://cucumber.io/blog/bdd/example-mapping-introduction/

Вашата дейност среща ли тези предизвикателства?

Да обсъдим вашия проект

Предпочитате имейл? Пишете ни на hola@habil.mx