Системы искусственного интеллекта в клинической медицине, ГОСТ Опции

[Игорь]

В 2022 году утверждены несколько любопытных документов:

ГОСТ Р 59921.1-2021 Системы искусственного интеллекта в клинической медицине. Часть 1. Клинические испытания
ГОСТ Р 59921.2-2021 Системы искусственного интеллекта в клинической медицине. Часть 2. Программа и методика технических испытаний
ГОСТ Р 59921.3-2021 Системы искусственного интеллекта в клинической медицине. Часть 3. Управление изменениями в системах искусственного интеллекта с непрерывным обучением
ГОСТ Р 59921.4-2021 Системы искусственного интеллекта в клинической медицине. Часть 4. Оценка и контроль эксплуатационных параметров
ГОСТ Р 59921.5-2021 Системы искусственного интеллекта в клинической медицине. Часть 5. Требования к структуре и порядку применения набора данных для обучения и тестирования алгоритмов
ГОСТ Р 59921.6-2021 Системы искусственного интеллекта в клинической медицине. Часть 6. Общие требования к эксплуатации

Воспроизводить ГОСТ на форуме запрещено, но каждый может легко найти тексты документов на информационно-справочных ресурсах, в том числе на официальных сайтах правовой информации. Приглашаю коллег ознакомиться и высказаться.

Сообщение отредактировал Игорь - 4.08.2022 - 13:51

[Игорь]

Игорь, а разве там есть упоминание ROC? Может, пропустил.

П. 8.3. первой части и далее до конца документа.

... далеко не для любой задачи прогнозирование меры связанные с ROC оптимальны. Даже при простой бинарной классификации. А уж сводить к ней, например, регрессию непрерывной величины - это все равно, что удалять миндалины через анус.

Нужно посмотреть, как врач или исследователь ставит диагноз или дает заключение (достаточно открыть карточку пациента). И это не некоторая функция (в математическом смысле), а ответ в виде да/нет на вопрос о наличии того или иного симптома или заболевания с формулировкой последнего в соответствии с официальной классификацией (МКБ, МКФ). Даже анализ некоторых распределенных во времени и пространстве параметров (ЭКГ, УЗИ, натурное изображение, рентгенография, в том числе наблюдения в динамике) сводится в заключению типа да/нет относительно вопроса о наличии того или иного симптома или особенности изучаемого материала. Затем следует выбор метода лечения в виде медико-экономического стандарта, включая оперативные вмешательства, ведение, препараты, манипуляции и т.д. Если все было сделано верно, больной выздоравливает (опять же результат: здоров - да/нет, годен/ не годен; осложнения - да/нет). Процедуры, относящиеся к постановке диагноза на основе корректно установленных симптомов, могут быть вполне формализованы в виде системы ИИ, определение которого дается в п. 3.10 цитируемого источника.

Надо сказать, что анализ бинарных данных не прост. Вот здесь наше скромное руководство по методам можно посмотреть https://sourceforge.net/projects/me-com/files/doc/. Прикладываю, если не удастся скачать.

Критическое замечание. Рис. 2 первой части ГОСТ вызывает сомнение. ROC кривая не может быть гладкой. Исходя из методики построения ROC кривая должна изображаться в виде лесенки (п. 4.2.7. Руководства, упомянутого в предыдущем абзаце).

Сообщение отредактировал Игорь - 7.08.2022 - 08:41

Прикрепленные файлы

 MEcom_Method_Guide_ru.pdf ( 1,64 мегабайт ) Кол-во скачиваний: 479