Разработчики Института искусственного интеллекта Университета Иннополис представили универсальную модель для анализа медицинских изображений. Система под названием «Инновит» распознает патологии на КТ, МРТ, рентгене и УЗИ, выделяет их на снимках и автоматически формирует текстовое заключение. Прототип создали при поддержке Фонда науки и технологий Татарстана.
Специалисты Института искусственного интеллекта Университета Иннополис разработали универсальную ИИ‑систему для анализа медицинских изображений. Прототип получил название «Инновит». Он умеет находить патологии на снимках, выделять их и формировать текстовое описание, похожее на то, которое написал бы врач‑рентгенолог.
Большинство существующих медицинских нейросетей узкоспециализированы. Одна модель работает только с КТ головного мозга, другая — с рентгеном легких, третья ищет только пневмонию или рак. Чтобы охватить все типы исследований, врачу пришлось бы использовать целый набор таких систем. Это дорого и сложно в обслуживании.
Как объяснили в университете, их разработка решает сразу несколько задач. «Инновит» может находить все патологии на изображении, выделять конкретные рентгенологические признаки, искать определенный тип изменений, например жидкость в плевральной полости. А еще система способна сгенерировать полное текстовое описание снимка.
В основе прототипа лежит фундаментальная модель компьютерного зрения Florence‑2. Ее дообучили на базе из более чем 100 тысяч медицинских изображений — КТ, МРТ, рентгена, УЗИ и маммографии. В выборку вошли все анатомические зоны и полный спектр патологий. Для обучения разработали новую функцию потерь.
Над проектом работала междисциплинарная команда: специалисты по машинному обучению, инженеры данных и клинические эксперты.
В ближайших планах разработчиков — расширить базу данных для дообучения, включив сложные клинические случаи. Также модель планируют интегрировать с большими языковыми моделями, чтобы она могла учитывать предыдущие исследования пациента и данные из медкарты. Это повысит точность диагностики.
От зарубежных аналогов разработка отличается более легкой архитектурой и новой функцией потерь. Это делает систему эффективнее в вычислениях и дешевле в обслуживании и обновлении, говорят создатели.
Читать далее:
Вселенная внутри черной дыры: наблюдения «Уэбба» подтверждают странную гипотезу
Испытания ракеты Starship Илона Маска вновь закончились взрывом в небе
Сразу четыре похожих на Землю планеты нашли у ближайшей одиночной звезды
Обложка: freepik
