Электронный фонд правовой
и нормативно-технической документации
ГОСТ Р 59898-2021 Оценка качества систем искусственного интеллекта. Общие положения (с Поправкой)
ГОСТ Р 59898-2021
НАЦИОНАЛЬНЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ
ОЦЕНКА КАЧЕСТВА СИСТЕМ ИСКУССТВЕННОГО ИНТЕЛЛЕКТА
Общие положения
Quality assurance of artificial intelligence systems. General
ОКС 35.020*
________________
* Поправка (ИУС № 9-2025)
Дата введения 2022-03-01
Предисловие
1 РАЗРАБОТАН Федеральным государственным автономным образовательным учреждением высшего образования "Национальный исследовательский университет "Высшая школа экономики" (НИУ ВШЭ)
2 ВНЕСЕН Техническим комитетом по стандартизации ТК 164 "Искусственный интеллект"
3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Приказом Федерального агентства по техническому регулированию и метрологии от 26 ноября 2021 г. 1620-ст
4 ВВЕДЕН ВПЕРВЫЕ
Правила применения настоящего стандарта установлены в статье 26 Федерального закона от 29 июня 2015 г. N 162-ФЗ "О стандартизации в Российской Федерации". Информация об изменениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего года) информационном указателе "Национальные стандарты", а официальный текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ближайшем выпуске ежемесячного информационного указателя "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет (www.rst.gov.ru)
ВНЕСЕНА поправка, опубликованная в ИУС № 9, 2025 год, введенная в действие с 04.06.2025
Поправка внесена изготовителем базы данных
Введение
Оценка качества является неотъемлемой частью жизненного цикла систем искусственного интеллекта (СИИ) и включает в себя действия, проводимые на стадиях разработки, создания и эксплуатации данных систем в целях обеспечения необходимого уровня соответствия СИИ установленным требованиям. В зависимости от стадии жизненного цикла оценка качества позволяет:
- определить текущие параметры СИИ и выполнить действия, направленные на повышение ее надежности, производительности, востребованности и целенаправленности, а также расширения функциональности системы (путем выполнения процедур по устранению неисправностей и совершенствованию программного обеспечения);
- удостовериться, что выходные данные СИИ являются приемлемыми и обоснованными для решения поставленной задачи в условиях, представленных в описании СИИ, с учетом современного уровня развития отрасли;
- убедиться в достижении целей предназначения СИИ в условиях обеспечения заданной точности, надежности и достоверности выходных данных;
- подтвердить соответствие характеристик СИИ требуемым значениям, установленным в технической документации и/или нормативных правовых актах.
Отсутствие надлежащей оценки качества систем ИИ может привести к снижению уровня безопасности людей, окружающей природной среды, материальных и нематериальных активов. С другой стороны, наличие грамотно выстроенной системы оценки качества позволяет повысить доверие к системам ИИ на физическом уровне путем подтверждения требований к надежности, безопасности и функциональности.
Настоящий стандарт разработан на основе ГОСТ Р ИСО/МЭК 25010-2015, определяющего общие подходы к оценке качества программных продуктов и преимущественно программных вычислительных систем, но не учитывающего специфику вычислительных алгоритмов и характеристик СИИ.
Настоящий стандарт позволяет дополнить представленный в ГОСТ Р ИСО/МЭК 25010 набор показателей качества специализированными характеристиками (субхарактеристиками) и соответствующими метриками для обеспечения полноценной оценки качества СИИ.
Доступ к полной версии документа ограничен
Документ «ГОСТ Р 59898 2021» устанавливает общие положения для оценки качества систем искусственного интеллекта (ИИ). Основное назначение стандарта заключается в создании единой методологии и подходов к оценке, что позволяет обеспечить высокую степень надёжности и эффективности систем ИИ в различных сферах применения. Стандарт охватывает широкий спектр областей, включая промышленность, здравоохранение, транспорт и другие, где использование ИИ становится всё более распространённым.
Ключевыми аспектами, регламентируемыми стандартом, являются методы оценки, параметры качества, требования к системам ИИ и процедуры их тестирования. Стандарт описывает как количественные, так и качественные показатели, которые должны быть учтены при проведении оценочных мероприятий. В частности, внимание уделяется таким параметрам, как точность, надёжность, интерпретируемость и безопасность систем ИИ.
Важные технические детали включают условия испытаний, классификацию систем ИИ и измеряемые величины, которые помогают в стандартизации процессов оценки. Стандарт также определяет требования к документации, необходимой для подтверждения соответствия систем ИИ установленным критериям. Это способствует созданию прозрачной системы оценки, которая может быть использована как для новых разработок, так и для уже существующих технологий.
Целевая аудитория данного стандарта включает производителей систем ИИ, исследовательские лаборатории, а также контролирующие органы и организации, занимающиеся сертификацией технологий. Стандарт предоставляет производителям инструменты для улучшения качества своей продукции, а лабораториям — чёткие критерии для проведения испытаний и оценок. Контролирующие органы получают возможность более эффективно осуществлять надзор за соблюдением стандартов качества.
Практическое значение стандарта заключается в его влиянии на безопасность, качество и совместимость систем ИИ. Применение данного стандарта позволяет минимизировать риски, связанные с использованием ИИ, а также повысить доверие пользователей к технологиям. Стандарт способствует улучшению охраны труда, так как обеспечивает более безопасные условия эксплуатации систем ИИ в различных сферах.
В документе «ГОСТ Р 59898 2021» также были внесены изменения, касающиеся уточнения методов оценки и расширения перечня параметров, подлежащих измерению. Это позволяет более точно учитывать современные тенденции в области искусственного интеллекта и адаптировать стандарт к быстро меняющимся условиям технологической среды.
Описание документа носит справочный характер, достоверность этого материала не гарантируется.
Чтобы получить полный доступ к этому и другим документам, приобретайте доступ к Информационной сети «Техэксперт» - лидеру в области комплексного обеспечения предприятий нормативно-технической документацией.
доступны в системах «Техэксперт» и «Кодекс»
Возможно вас заинтересуют
ГОСТ Р 59897-2021 Данные для систем искусственного интеллекта в образовании. Требования к сбору, хранению, обработке, передаче и защите данных
ГОСТ Р 59896-2021 Образовательные продукты с алгоритмами искусственного интеллекта для адаптивного обучения в общем образовании. Требования к учебно-методическим материалам
ГОСТ Р 59895-2021 Технологии искусственного интеллекта в образовании. Общие положения и терминология
ГОСТ Р 59899-2021 Образовательные продукты с алгоритмами искусственного интеллекта для адаптивного обучения в общем образовании. Технические требования
ГОСТ Р 59900-2021 Системы искусственного интеллекта. Типовые требования к контрольным выборкам исходных данных для испытания систем искусственного интеллекта в образовании (с Поправкой)
ПНСТ 552-2021 (ИСО/МЭК 30107-4:2020) Информационные технологии (ИТ). Биометрия. Обнаружение атаки на биометрическое предъявление. Часть 4. Профиль для испытания мобильных устройств