Разработчики из Google создали микроскоп с дополненной реальностью для диагностики рака

Татьяна Новак

Исследовательское подразделение Google разработало прототип светового микроскопа, который с помощью алгоритма глубокого обучения находит злокачественные опухоли и показывает их врачу в дополненной реальности. Об этом сообщается в блоге компании.

Для своей разработки учёные взяли обычный микроскоп и модифицировали его, вставили между окуляром и объективом два отражателя из полупрозрачного стекла, которые накладывают цифровую проекцию, созданную ИИ-алгоритмом, на реальное увеличенное изображение образца ткани. Авторы отмечают, что изображение в дополненной реальности обновляется со скоростью около 10 кадров в секунду, быстро реагируя на перемещение образца и изменение масштаба увеличения от 4 до 40 раз.

Диагностику рака производит глубокая свёрточная нейросеть, разработанная специалистами Google совместно с Университетском колледжем Лондона. Чтобы продемонстрировать её работу, учёные создали два разных алгоритма для обнаружения метастазов рака молочной железы в образцах лимфоузлов и рака предстательной железы в образцах простатэктомии. Оба алгоритма обучили на аннотированных базах данных с сотнями изображений.

В дополненной реальности злокачественные образования обведены зелёными линиями

Испытания алгоритмов показали, что они справляются с диагностикой на уровне опытных клицинистов. Как показано на графике, площадь под кривой ошибок AUC составила 0,96 для рака предстательной железы и 0,98 для рака груди. На вертикальной оси обозначено количество верных положительных результатов диагностики, на горизонтальной — количество ложноположительных результатов.

Загрузить еще