ИИ из Иннополиса научили предсказывать взгляд врача при чтении рентгена

Ученые Университета Иннополис разработали нейросеть, которая определяет, на какие зоны рентгеновского снимка обращает внимание врач и сколько времени он их изучает, сообщает Ferra.ru.

Модель обучали с учетом не только изображения, но и медицинских данных, а также конкретных диагностических задач. Среди них, например, выявление пневмонии. По данным разработчиков, точность обнаружения заболеваний у новой системы на 5% выше, чем у аналогов.

Авторы проекта отмечают, что обычные диагностические нейросети могут обращать внимание на случайные элементы снимка: засветки, тени от украшений и другие артефакты. Новая модель объединяет визуальные признаки, текстовые метки и медицинские знания.

Система способна предсказывать последовательность фиксаций взгляда рентгенолога: куда именно и на какое время врач смотрит при решении определенной задачи. В качестве входных данных используются признаки изображения, текстовые обозначения вроде «норма» или «пневмония», а также смысловые описания.

Благодаря этому нейросеть выделяет не просто светлые или темные участки снимка, а связывает их с конкретными органами или патологиями. Такой подход помогает сделать работу модели более понятной для человека.

Главное назначение разработки связано не только с поддержкой врачей, но и с обучением специалистов. Систему можно применять в тренажерах, где молодые рентгенологи будут отрабатывать правильные схемы визуального поиска при чтении снимков.

Один из авторов работы, специалист Лаборатории искусственного интеллекта в медицине Университета Иннополис Дмитрий Львов, пояснил, что модель связывает изображение с медицинским смыслом его отдельных областей и диагностической задачей. По его словам, анализ данных позволил получать понятные человеку описания фрагментов снимка, такие как «кость», «сердце» и «затемнение».

Рекомендуем также:

1. Пенсионеров за рулем ждут тревожные изменения: после какого возраста могут начаться проблемы с водительскими правами
2. Пока они пекутся, вся семья собирается на кухне: ароматные булочки с сахаром получаются сказочно пышными
3. Самый ленивый и вкусный ужин найден: молодая капуста с рисом и яйцом превращается в нежнейшие голубцы
4. Соседи ахнут от размеров ваших пионов: всего одна майская подкормка превращает кусты в цветущий шар
5. Их считают бесполезными монстрами, но все намного страшнее: почему клещи жизненно важны для природы