Нейросети — теперь в лабораторном оборудовании

Компания Google работает над созданием микроскопа с дополненной реальностью. Он будет использоваться для обнаружения злокачественных образований. Прототип был представлен на конференции AACR, а подробнее о своей работе компания написала в блоге Google Research.

Так называемое компьютерное зрение — одна из передовых сфер использования машинного обучения, нейросетей и искусственного интеллекта. Обычно его используют для распознавания лиц и других объектов, а также в сфере медицины — для поиска всевозможных патологий, изменений и образований. 

Инженеры Google занялись тем, что создали прототип микроскопа, способного находить раковые опухоли. В качестве «болванки» использовался обыкновенный оптический микроскоп, который разработчики дополнили двумя модулями. Модули дают возможность отображать информацию из дополненной реальности прямо во время наблюдения за образцами. 

Образец обрабатывается не только человеком, но и нейросетью Inception v3 — алгоритмом Университетского коллежа Лондона. Технически, алгоритм можно использовать для обнаружения совершенно любых патологий, но специалисты Google сосредоточились на раке предстательной железы и метастазах рака молочной железы в сигнальных лимфатических узлах. Предварительно нейросеть натренировали на 285 изображениях рака предстательной железы и 399 — метастазов в лимфоузлах.

Работает всё следующим образом: нейросеть изучает образцы ткани, конструирует тепловую карту и «разбивает» её на пиксели, где каждый пиксель получает вероятность наличия на нём раковых клеток. Возможные опухоли микроскоп может подсвечивать прямо во время изучения образцов. 

Специалисты Google подчёркивают, что больницам не придётся закупать новые микроскопы, чтобы получить интерактивное лабораторное оборудование. Модули с алгоритмом подойдут для большинства современных оптических микроскопов.