ГОСТ Р 59900-2021 Системы искусственного интеллекта. Типовые требования к контрольным выборкам исходных данных для испытания систем искусственного интеллекта в образовании (с Поправкой)

ГОСТ Р 59900-2021

НАЦИОНАЛЬНЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ

СИСТЕМЫ ИСКУССТВЕННОГО ИНТЕЛЛЕКТА

Типовые требования к контрольным выборкам исходных данных для испытания систем искусственного интеллекта в образовании

Artificial intelligence systems. Typical requirements for check samples of initial data for testing artificial intelligence systems in education

ОКС 35.240.90

Дата введения 2022-03-01

Предисловие

1 РАЗРАБОТАН Федеральным государственным автономным образовательным учреждением высшего образования "Национальный исследовательский университет "Высшая школа экономики" (НИУ ВШЭ)

2 ВНЕСЕН Техническим комитетом по стандартизации ТК 164 "Искусственный интеллект"

3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Приказом Федерального агентства по техническому регулированию и метрологии от 26 ноября 2021 г. N 1622-ст

4 ВВЕДЕН ВПЕРВЫЕ

Правила применения настоящего стандарта установлены в статье 26 Федерального закона от 29 июня 2015 г. N 162-ФЗ "О стандартизации в Российской Федерации". Информация об изменениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего года) информационном указателе "Национальные стандарты", а официальный текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ближайшем выпуске ежемесячного информационного указателя "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет (www.rst.gov.ru)

ВНЕСЕНА поправка, опубликованная в ИУС N 5, 2022 год, введенная в действие с 30.03.2022

Поправка внесена изготовителем базы данных

1 Область применения

Настоящий стандарт распространяется на технологии искусственного интеллекта в образовании и устанавливает типовые требования к контрольным выборкам исходных данных для испытания систем искусственного интеллекта в образовании, построенных на основе алгоритмов машинного обучения и анализа данных.

2 Термины и определения

В настоящем стандарте применены следующие термины с соответствующими определениями:

2.1 образовательный продукт с алгоритмами искусственного интеллекта: Программно-техническая система, использующая алгоритмы искусственного интеллекта для решения различных задач в области образования.

2.2 гиперпараметры (в машинном обучении): Параметры системы искусственного интеллекта, значения которых задаются до начала обучения и не изменяются в процессе обучения.

Примечание - У системы искусственного интеллекта может не быть гиперпараметров.

2.3 обучающая выборка: Набор данных, на котором происходит обучение системы искусственного интеллекта.

2.4 валидационная выборка: Набор данных, на котором происходит оптимизация гиперпараметров системы искусственного интеллекта и выбор наилучшего алгоритма.

Доступ к полной версии документа ограничен

Название документа

Номер документа

59900-2021

Вид документа

Нормативно-технический документ

Классификация ОКС

35 Информационные технологии 35.240 Применение информационных технологий

Статус

Скрыто

Дата принятия

Скрыто

Дата начала действия

Скрыто

Документ «ГОСТ Р 59900 2021» устанавливает типовые требования к контрольным выборкам исходных данных, предназначенным для испытания систем искусственного интеллекта в области образования. Основное назначение стандарта заключается в создании единой методологической базы для оценки и верификации систем ИИ, что обеспечивает их надежность и соответствие установленным требованиям. Сфера применения охватывает как образовательные учреждения, так и разработчиков программного обеспечения, использующих ИИ-технологии.

В документе регламентируются ключевые аспекты, включая методы отбора контрольных выборок, параметры, которые должны быть учтены при испытаниях, а также требования к документированию результатов. Также описаны процедуры, которые должны соблюдаться в процессе испытаний, что позволяет обеспечить воспроизводимость и объективность получаемых данных. Важное внимание уделяется методам анализа, которые должны быть применены для оценки эффективности систем ИИ в образовательной среде.

Технические детали, указанные в стандарте, включают условия испытаний, такие как минимальные размеры выборок, критерии их представительности и методы измерения результатов. Также рассматриваются классификации систем ИИ, которые могут быть подвергнуты испытаниям, и измеряемые величины, такие как точность, скорость обработки данных и уровень удовлетворенности пользователей. Это позволяет обеспечить всестороннюю оценку функциональности и безопасности систем.

Целевая аудитория стандарта включает производителей систем искусственного интеллекта, научно-исследовательские лаборатории, а также контролирующие органы, занимающиеся сертификацией и аккредитацией образовательных технологий. Стандарт служит основой для разработки новых технологий и повышения качества образовательных услуг, что в свою очередь способствует улучшению образовательных результатов и повышению конкурентоспособности образовательных учреждений.

Практическое значение «ГОСТ Р 59900 2021» заключается в его влиянии на безопасность и качество систем ИИ, используемых в образовании. Стандарт способствует формированию доверия к технологиям ИИ, обеспечивая их совместимость и соответствие требованиям охраны труда. В документе также содержатся поправки, касающиеся уточнения методов испытаний и расширения перечня параметров, что позволяет адаптировать стандарт к быстро меняющимся условиям технологического прогресса.

Описание документа носит справочный характер, достоверность этого материала не гарантируется.