ГОСТ Р 59898-2021. Национальный стандарт Российской Федерации. Оценка качества систем искусственного интеллекта. Общие положения

5 Модель качества

 

5.1 Тестирование СИИ в процессе ее жизненного цикла осуществляется с целью оценки соответствия системы требованиям функциональности, надежности и безопасности СИИ.

5.2 Качество определяет способность СИИ при заданных условиях удовлетворять установленным или предполагаемым потребностям различных заинтересованных сторон, что позволяет таким образом оценить ее достоинства.

5.3 Для описания качества СИИ используется модель качества, представляющая собой структурированное множество характеристик, субхарактеристик, метрик и отношений между ними.

5.4 Для оценки качества СИИ могут быть использованы следующие модели качества по ГОСТ Р ИСО/МЭК 25010:

- модель качества при использовании;

- модель качества продукта;

- модель качества данных.

Примечание - В настоящем стандарте подробно рассмотрена модель качества СИИ как продукта.

 

5.5 Качество СИИ, как любого программного обеспечения, является интегральным показателем, для оценки которого на этапе построения модели качества (см. рисунок 1), исходя из функционального назначения системы и решаемой прикладной интеллектуальной задачи, определяется представительный набор показателей качества (существенных характеристик и субхарактеристик)

 

F(S) = {f₁, f₂, ... f_N}, (1)

 

где S - оцениваемая СИИ;

F - представительный набор существенных характеристик;

f_i - i-я существенная характеристика.

 

 

Рисунок 1 - Дерево существенных характеристик и метрик СИИ

 

5.6 Для количественного измерения показателя качества (характеристики f_i, субхарактеристики c_i) используется соответствующая метрика m_i, определяемая на измерительной шкале, тип которой выбирается исходя из физического смысла соответствующей характеристики f_i (числовая шкала, шкала категорий, отношений и др.).