Lorem ipsum не выпускает продукты

Ввод «asdf» в поле ZIP-кода говорит вам лишь о том, что валидатор отвергает мусор, — а это вы и так знали. Чего он не скажет, так это справится ли дальнейший конвейер обработки адресов с настоящей записью: геокодирование, поиск налогов, антифрод-скоринг, маршрутизация доставки.

Тестовые данные с правильным форматом проходят этот барьер намеренно — и добираются до слоёв, где живут настоящие баги.

Три класса отказов

Реалистичные образцы данных чётко разделяют три класса отказов: отклонение (валидация поймала — ожидаемо), принятие с ошибочным поведением дальше по конвейеру (настоящий баг) и принятие с корректным поведением (счастливый путь). Чисто мусорный ввод сливает все три класса в одну неразличимую кучу ошибок.

Сделайте это привычкой

Держите вкладку генератора открытой рядом с тест-раннером. Берите свежую партию записей в каждой сессии, сохраняйте интересные и выгружайте их в фикстуры. Воспроизводимый, правдоподобный ввод — самая дешёвая тестовая инфраструктура, которую вы когда-либо развернёте.