Программа и методика испытаний (ПМИ) представляет собой документ, который устанавливает, что именно проверяют, в каких условиях, какими действиями, какими средствами и по каким критериям оценивают результат. Программа отвечает на вопрос, какие проверки и в каком объёме проводят, а методика описывает, как выполнить конкретную проверку и как оценить её итог.
Пользователи часто ищут готовый образец, но шаблон без привязки к объекту испытаний, техническому заданию и критериям приёмки задачу не решает. Ниже разберём, что входит в ПМИ, кто её разрабатывает, чем она отличается от протокола испытаний и какие стандарты применяют в России.
Коротко о главном
- Грамотная ПМИ делает испытания воспроизводимыми и обоснованными.
- Программа задаёт перечень и объём проверок, а методика описывает порядок их выполнения.
- Документ разрабатывают под конкретный объект и требования технического задания.
- Программа отличается от протокола: она задаёт план, а протокол фиксирует результат.
- Для программного обеспечения, автоматизированных систем и продукции применяют разные стандарты.
- Готовый образец служит ориентиром по структуре, но не заменяет документ под объект.
Что такое программа и методика испытаний
Такой документ связывает объект испытаний, требования к нему и способ проверки воедино. Она отвечает на вопросы, что проверяем, зачем, при каких условиях, какими средствами, в какой последовательности и по каким критериям делаем вывод о соответствии. Без такого документа испытания превращаются в набор разрозненных действий, результат которых трудно повторить и обосновать.
Ценность документа в воспроизводимости: другой специалист, следуя ПМИ, должен получить сопоставимый результат. Именно поэтому программу и методику испытаний составляют не для комплекта бумаг, а как рабочий инструмент, на основании которого принимают решение о приёмке объекта.
Для чего нужна ПМИ и какие бывают испытания
Применяют ПМИ на разных этапах жизненного цикла продукта, и цель испытаний определяет содержание проверок.
- предварительные испытания: проверка готовности объекта к приёмке;
- приёмочные испытания: подтверждение соответствия требованиям перед вводом в эксплуатацию или приёмкой работ;
- квалификационные испытания: оценка готовности производства к серийному выпуску;
- типовые и периодические испытания: контроль стабильности характеристик;
- сертификационные испытания: проверка в целях подтверждения соответствия, когда это применимо.
Под каждый вид испытаний ПМИ формируют отдельно. Приёмочные испытания программного продукта и периодические испытания промышленной продукции отличаются и объёмом, и методами, поэтому единый шаблон здесь не работает.
Что входит в программу и методику испытаний
Состав разделов зависит от объекта и применимого стандарта, но типовая структура включает несколько обязательных частей.
- объект испытаний: что именно проверяется, версия, комплектация, идентификация;
- цель испытаний: какое решение принимается по их результатам;
- объём испытаний: перечень проверяемых функций, характеристик и режимов;
- условия проведения: среда, оборудование, исходные данные, ограничения;
- средства испытаний: приборы, стенды, тестовые данные, программные средства;
- порядок и методы проверок: последовательность действий и способ измерения;
- критерии соответствия: при каких результатах проверка считается пройденной;
- порядок оформления и обработки результатов, действий при несоответствиях.
Отдельное значение имеют критерии приёмки: без них результат проверки нельзя трактовать однозначно. Условия завершения испытаний тоже фиксируют: выполнение объёма проверок, обработка несоответствий и принятие решения в предусмотренном порядке.
Чем ПМИ отличается от протокола испытаний
Два документа путают, хотя они относятся к разным стадиям. Сведём различие в таблицу.
| Документ | Что содержит | Когда появляется |
|---|---|---|
| Программа и методика испытаний | План проверок, условия, методы и критерии | До начала испытаний |
| Протокол испытаний | Фактические результаты и вывод о соответствии | По итогам испытаний |
Проще говоря, ПМИ задаёт план и правила проверки, а протокол фиксирует результат её выполнения. Протокол оформляют по методике, заданной программой, поэтому качество ПМИ прямо влияет на доказательность протокола. Требования к оформлению результатов разобраны в материале о протоколе испытаний.
Какие ГОСТ применяют для ПМИ
Единого стандарта «на все случаи» нет: выбор зависит от объекта испытаний. Для программного обеспечения программные документы, включая программу и методику испытаний, оформляют по стандартам Единой системы программной документации, в частности по ГОСТ 19.301. Для автоматизированных систем применяют комплекс стандартов на автоматизированные системы, а для конструкторской документации на изделия применяют Единую систему конструкторской документации.
Испытания и приёмку продукции производственно-технического назначения регулирует, в частности, ГОСТ 15.309. Конкретный стандарт и его действующую редакцию сверяют по каталогу перед разработкой документа, поскольку требования к структуре и обозначениям различаются. Ссылаться на устаревшую редакцию или неподходящий стандарт нельзя.
Кто разрабатывает программу и методику испытаний
Разрабатывает ПМИ исполнитель работ, разработчик продукции или программного обеспечения, а согласуют и утверждают документ стороны, предусмотренные договором и техническим заданием. Для приёмочных испытаний состав и полномочия приёмочной комиссии определяют заранее, чтобы результаты имели силу для принятия решения.
Основой для разработки служит техническое задание: именно из него берут требования, которые предстоит проверить. Если требование нельзя проверить, его формулировку уточняют ещё на этапе задания, а не при испытаниях. Достоверность результатов зависит и от компетентности исполнителя: для части испытаний значима аккредитация лаборатории, разобранная в материале об аккредитации лабораторий.
Особенности ПМИ для ПО, автоматизированных систем и продукции
Программное обеспечение
В программном обеспечении ПМИ описывает тестовые сценарии, контрольные примеры, исходные данные и ожидаемые результаты. Проверяют функции, режимы работы, обработку ошибок и граничные условия. Важна воспроизводимость: контрольный пример должен давать один и тот же результат при повторном прогоне.
Автоматизированные системы
В автоматизированных системах и АСУ ТП учитывают взаимодействие программных и технических средств, работу на реальных или имитированных данных, режимы отказов и восстановления. Объём проверок здесь шире, поскольку оценивают систему в целом, а не отдельный модуль.
Продукция и оборудование
Для продукции производственно-технического назначения в методике задают измеряемые характеристики, средства измерений, условия и порядок контроля, а также требования к опытным образцам или партии. Результаты сопоставляют с нормами, установленными технической документацией. Средства измерений при этом должны иметь подтверждённый статус, что связано со свидетельством об утверждении типа средств измерений.
Почему готовый образец не заменяет разработку
Образец программы и методики испытаний помогает понять структуру, но не учитывает конкретный объект, техническое задание и критерии приёмки. Перенесённый без анализа шаблон содержит проверки, которые к объекту не относятся, и пропускает те, что действительно важны. В результате испытания формально проходят, но не подтверждают соответствие требованиям.
Корректный порядок обратный: сначала берут требования из технического задания, затем определяют проверки, условия и критерии, а образец используют только как ориентир по разделам. Такой подход делает документ пригодным для реального решения о приёмке.
Как разработать ПМИ: порядок действий
- Определите объект испытаний, его версию и комплектацию.
- Выпишите из технического задания требования, подлежащие проверке.
- Сформируйте перечень и объём проверок под цель испытаний.
- Опишите условия, средства и методы для каждой проверки.
- Установите критерии соответствия и порядок фиксации результатов.
- Согласуйте документ со сторонами и приёмочной комиссией до начала испытаний.
Такой порядок превращает ПМИ в рабочий инструмент. Большинство проблем возникает там, где проверки не привязаны к требованиям задания или где критерии приёмки сформулированы нечётко.
Частые ошибки при разработке
- Копировать образец без привязки к объекту и техническому заданию.
- Не задавать критерии соответствия, из-за чего результат нельзя однозначно оценить.
- Смешивать программу и методику с протоколом испытаний.
- Описывать проверки, которые невозможно воспроизвести.
- Игнорировать условия и средства испытаний, влияющие на результат.
- Ссылаться на устаревшую редакцию стандарта или неподходящий стандарт.
Частые вопросы
Что такое программа и методика испытаний?
Это документ, который устанавливает, что проверяют, в каких условиях, какими средствами и методами и по каким критериям оценивают результат. Программа задаёт перечень и объём проверок, а методика описывает порядок их выполнения.
Чем ПМИ отличается от протокола испытаний?
ПМИ задаёт план и правила проверки и составляется до испытаний. Протокол испытаний фиксирует фактические результаты и вывод о соответствии по итогам их проведения.
По каким ГОСТ разрабатывают ПМИ?
Выбор зависит от объекта. Для программного обеспечения применяют стандарты ЕСПД, в частности ГОСТ 19.301, для продукции — стандарты на испытания и приёмку, например ГОСТ 15.309. Действующую редакцию сверяют по каталогу.
Можно ли использовать готовый образец ПМИ?
Образец подходит как ориентир по структуре. Его нельзя применять без адаптации под конкретный объект, требования технического задания и критерии приёмки.