Сертификация программного обеспечения, Харьков

Оценка программного обеспечения по результатам проведения испытаний

ХХП «СЕРТЦентр АСУ» осуществляет оценку программного обеспечения по результатам проведения испытаний

Процесс испытания ПО и ПТК условно делится на два этапа:

1. организационно-технической подготовки к проведению испытаний ПО и ПТК;
2. проведение испытаний ПО и ПТК.

Основными задачами подготовки к проведению испытаний ПО и ПТК являются:

• составление общего плана и графика испытаний с указанием сроков испытаний;
• разработка, согласование и утверждение программ и методик испытаний;
• накопление путем анализа представленной технической документации данных о качестве ПО и ПТК;
• разработка технологической схемы испытаний.

Технологическая схема испытаний содержит описание процесса испытаний ПО и ПТК с указанием последовательности и содержания действий по определению значений показателей качества ПО и ПТК, а так же данные о программно-инструментальных средствах поддержки испытаний.

При подготовке к испытаниям определяется нормативно-техническая база испытаний, включающая:

• документы, устанавливающие требования к ПО и ПТК, стандарты, в том числе международные (серия ISO/IEC), технические условия, техническое задание, сертификация требований.
• методики оценки показателей сертификации ПО.

Технические средства, на базе которых планируется проводить испытания, проверяются на предмет их аттестации.

Проверяется комплектность программной и технической документации в соответствии с требованиями ГОСТ 19.101, ГОСТ 19.105.

При разработке программ и методики испытаний для каждого показателя определяется:

• состав документации (технических материалов) обеспечивающий оценку по каждому испытанию;
• виды испытаний;
• критерии оценки показателей ПО.

При оценке соответствия ПО и ПТК применяются измерительный, регистрационный и экспертный методыопределения значений показателей качества ПО и ПТК.

Критерии оценки при анализе характеристик качества ПО содержит три категории оценок:

• соответствует;
• не соответствует;
• соответствует частично требованиям нормативной документации.

Оценка соответствия проводится:

• у поставщика ПО (участие в испытаниях на аттестованной экспериментальной базе по согласованным программам и методикам);
• в Испытательной Лаборатории Сертификационного Центра АСУ.

Оценка программного обеспечения (ПО) и программно-технических комплексов (ПТК) осуществляется в соответствии с показателями качества, выбранными Заказчиком, в соответствии с требованиями нормативной документации.

При назначении показателей качества и дальнейшей конкретизации требований, учитывается класс безопасности заявляемой продукции. При сертификации ПО и ПТК приняты 2,3 и 4 классы безопасности. Класс безопасности заявляемого объекта определяется из технического задания/ технических условий.

Ниже приведен общий перечень показателей сертификации ПО и ПТК:

1. Функциональность (функциональная полнота, способность к взаимо­действию, защищенность, согласованность)
2. Надежность функционирования (уровень завершенности (отсутствия ошибок), устойчивость к дефектам, восстанавливаемость, доступность, готовность)
3. Удобство в использовании (осваиваемость, простота подготовки к работе, удобство пользователь­ского интерфейса, анализируемость результатов, документированность)
4. Переносимость (адаптируемость, настраиваемость)
5. Эффективность (временные характеристики, пропускная способность, расширяемость)

Перечень атрибутов, имеющих отношение к показателям качества, уточняется при разработке «Программы и методики проведения испытаний по оценке соответствия».

Общий перечень документации представляемой Заказчиком для проведения испытаний:

1. Техническая документация на ПО:

• логическая модель (иерархия функций ПО);
• архитектура ПО (иерархия компонент, структура ПО);
• библиотеки;
• исходные тексты;
• коды ПО.

2. Покупное (коммерческое) ПО
3. Описание тестов ПО, отчеты о тестировании
4. Планы верификации, валидации, интеграционные испытания
5. Отчеты о результатах верификации на всех фазах жизненного цикла
6. Отчет по валидации
7. Состав и характеристики инструментальных средств разработки и верификации ПО
8. Отчет по анализу допустимого уровня критичности и обеспечению безопасности
9. Руководство пользователя и программиста

Проведение испытаний ПО и ПТК проводятся на стенде Заказчика в соответствии с разработанной и согласованной «Программой и методикой проведения испытаний»