Введение 3
Постановка задачи 6
Глава 1. Актуальность применения технологий ИИ для диагностирования рака печени 7
1.1. Статистика заболеваемости раком печени 7
1.2. Методы искусственного интеллекта в анализе медицинских данных .... 7
Глава 2. Материал и методы 12
2.1. Набор медицинских данных 12
2.2. Описание работы YOLO 12
2.3. Архитектура нейронной сети YOLO v8 16
2.3.1. Реализация нейронной сети с использованием YOLOv8 и
TensorBoard 17
2.3.2 Трансферное обучение 20
2.4. Выходные детекции 21
Выводы 23
Заключение 26
Список литературы 27
Приложение 1. Подготовка инструментов и процесс работы с моделью 30
Настоящее время характеризуется проблемами в области здравоохранения, в том числе проблемой высокой заболеваемости раком, который остается одним из самых серьезных заболеваний. Если рассмотреть различные виды рака, то можно отметить, что рак печени занимает шестое место по распространенности во всем мире. Последние достижения в информатике позволяют расширить возможности сбора и визуализации медицинской информации, выходя за рамки обычного рентгенологического исследования и применяя более сложные методы визуализации опухолей [1].
На сегодняшний день растущий тренд в медицине связан с применением искусственного интеллекта (ИИ) и машинного обучения (МО) для автоматизации обработки медицинских изображений.
В современной медицине применяется несколько технологий визуализации, которые помогают получить детальное изображение различных органов в теле человека. Среди методов, используемых для обнаружения рака, можно выделить компьютерную томографию, магнитно-резонансную томографию, позитронно-эмиссионную томографию, ультразвуковое
обследование и рентгенографию. Данные методы предоставляют визуализацию в формате изображений или видео, сохраняемых в разнообразных форматах (например, DICOM, PNG, JPEG и др.) [1, 2]. Результаты таких исследований обычно оцениваются специалистами- радиологами или врачами ультразвуковой диагностики для постановки диагнозов. Для повышения точности диагностики и поддержки врачей в принятии решений могут применяться системы, основанные на компьютерных технологиях [3]. Различные методы визуализации, включая ультразвук, оказываются особенно ценными для точного анализа состояния определённых органов. В данном исследовании проводится изучение возможностей нейронных сетей для анализа ультразвуковых исследований метастатического поражение печени [4].
Согласно Всемирной организации здравоохранения [5], метастазы в печени встречаются у каждого третьего онкологического пациента. Ультразвуковое исследование печени — это безопасный метод, который позволяет визуализировать печень и её сосуды, используя звуковые волны для создания изображений. Этот метод помогает радиологам диагностировать разнообразные заболевания печени, включая рак и жировую болезнь печени, а также обнаруживать желчные камни. В ходе ультразвукового исследования особое внимание уделяется наблюдению за кровотоком в портальных и печёночных венах, что позволяет видеть изменения в эхогенности органа [6].
С развитием компьютерных технологий в последние десятилетия, автоматизация обработки медицинских изображений становится все более перспективной. Использование конвергентных нейронных сетей (CNN) демонстрирует большие возможности для анализа и интерпретации медицинских изображений, что особенно актуально для видео, включающего как пространственные, так и временные измерения [4, 7]. Автоматическое распознавание органов на ультразвуковых изображениях осложнено из-за спекулярных отражений, низкой контрастности и вариативности данных. Важно оценивать изменения в структуре печени на различных кадрах и временных интервалах при диагностике фокальных поражений.
При ультразвуковом исследовании различают четыре типа эхогенности тканей [6]:
Гиперэхогенность — ткани, через которые ультразвук проходит с высокой интенсивностью, обычно представляют плотные образования.
Анэхогенность — ткани, которые полностью поглощают ультразвук, часто связаны с жидкими структурами.
Изоэхогенность — ткани, эхогенность которых сопоставима с окружающими тканями, что может указывать на фокальные изменения.
Гипоэхогенность — ткани с пониженной плотностью, которые могут указывать на структурные изменения в органе.
Распознавание этих различий является ключевым для определения характера поражений, включая идентификацию злокачественных и доброкачественных новообразований. Одним из основных вызовов в ультразвуковой диагностике является кратковременное появление фокальных изменений на видео, что требует повышенного внимания и точности в анализе.
Введение компьютерных технологий в процесс диагностики значительно улучшает качество и скорость обработки медицинских изображений, устраняя человеческий фактор, такой как усталость или невнимательность, что особенно важно при длительных и сложных исследованиях. Это позволяет диагностам более точно и оперативно определять наличие и характер поражений, повышая общую эффективность медицинских процедур и улучшая исходы для пациентов.
Модели сетей глубокого обучения, представленные сверточными нейронными сетями, часто используются в области классификации медицинских изображений, а тесты обучения классификации проводились на трех моделях YOLO. Результаты этого исследования показывают, что глубокие остаточные нейронные сети имеют потенциальное применение в задачах классификации медицинских видеоизображений, особенно в области диагностики заболеваний печени.
Модель YOLO может компенсировать недостатки ручного обнаружения в исходной системе обнаружения изображений, повысить эффективность обнаружения и в то же время в качестве вспомогательной системы может уменьшить ошибки обнаружения и способствовать разработке автоматизированных и интеллектуальных систем обнаружения.
Работа демонстрирует успешное применение модели YOLOv8 для детекции метастаз на медицинских изображениях. Дальнейшие исследования могут быть направлены на улучшение модели и ее адаптацию к другим задачам медицинской диагностики.
1. Котина Е. Д. Математическое и компьютерное моделирование в ядерной медицине. Учебное пособие. СПб.: Изд-во ВВМ, 2022. 143 с.
2. Dev P. Imaging and visualization in medical education. // IEEE Computer
Graphics and Applications. 1999. Vol. 19. No. 3. pp. 21-31. doi:
10.1109/38.761545.
3. Balagourouchetty L., Pragatheeswaran J. K., Pottakkat B., Govindarajalou R. Decision Support System for Liver Cancer Diagnosis using Focus Features in NSCT Domain. // National Conference on Communications (NCC-2019). 2019. pp. 1-6, doi: 10.1109/NCC.2019.8732219.
4. Dong X., Zhou Y., Wang L., Peng J., Lou Y., Fan Y. Liver Cancer Detection
Using Hybridized Fully Convolutional Neural Network Based on Deep Learning Framework// IEEE Access. 2020. Vol. 8. pp. 129889-129898. doi:
10.1109/ACCESS.2020.3006362.
5. Всемирная организация здравоохранения [Электронный ресурс]: URL: https://www.who.int/ru/news-room/fact-sheets/detail/cancer (дата обращения: 31.05.2023).
6. Wnorowski A. M. et al. Outcome of liver lesions indeterminate for malignancy on ultrasound: the role of patient age, risk status, and lesion echogenicity //Abdominal Radiology. 2018. Vol. 43. pp. 2970-2979.
7. Sivanandan R., Jayakumari J. Development of a Novel CNN Architecture for Improved Diagnosis from Liver Ultrasound Tumor Images //International Journal of Uncertainty, Fuzziness and Knowledge-Based Systems. 2022. Vol. 30. No. 2. pp. 189-210.
8. Мерабишвили В.М. Злокачественные новообразования в Северо- Западном федеральном округе России (заболеваемость, смертность, достоверность учета, выживаемость больных). Экспрессинформация. Выпуск пятый / Под ред. проф. А.М.Беляева, проф. А.М. Щербакова. СПб, 2020. 236 с.
9. Мерабишвили В.М., Чепик О.Ф., Мерабишвили Э.Н. Динамика наблюдаемой и относительной выживаемости больных первичным раком печени на популяционном уровне с учетом стадии заболевания и гистологической структуры // Сибирский онкологический журнал. 2015. № 4. С. 5-11.
10. Бусько Е. А., Козубова К. В. и др. Сравнительный анализ эффективности КТ и контрастно-усиленного УЗИ в диагностике метастазов колоректального рака в печени // Анналы хирургической гепатологии. 2022. Т. 27. № 1. С. 22-32.
ll.Shaikh I., Kadam V. K. Automatic computer aided diagnosis framework of liver cancer detection using CNN-LSTM //J Hunan Univ (Nat Sci). 2021. Vol.48. No. 9.
12. Che H. et al. Liver disease classification from ultrasound using multi-scale CNN //International Journal of Computer Assisted Radiology and Surgery. 2021. Vol. 16. No. 9. pp. 1537-1548.
13. Yamakawa M., Shiina T., Nishida N., Kudo M. Computer aided diagnosis system developed for ultrasound diagnosis of liver lesions using deep learning// IEEE International Ultrasonics Symposium (IUS), 2019, pp. 2330-2333, doi: 10.1109/ULTSYM.2019.8925698.
14. Yamagishi S. et al. Detection and tracking of liver tumors for ultrasound diagnostic support using deep learning //Journal of Image and Graphics. 2022. Vol. 10. No. 1. pp. 50-55.
15. Tosaki T., Yamakawa M., Shiina T. A study on the optimal condition of ground truth area for liver tumor detection in ultrasound images using deep learning //Journal of Medical Ultrasonics. 2023. Vol. 50. No. 2. pp. 167-176.
16. Xie Y. et al. Endoscopic ultrasound image recognition based on data mining and deep learning //IEEE Access. 2022. Vol. 10. pp. 10273-10282.
17. Ким А. Обнаружение объектов с помощью YOLOv3 на Tensorflow 2.0 [Электронный ресурс]: URL: https://habr.com/ru/articles/556404/ (дата обращения: 14.09.2023)
18. Rohit Kundu YOLO: Algorithm for Object Detection Explained [Электронный ресурс]: URL: https://www.v7labs.com/blog/yolo-object-
detection (дата обращения: 14.09.2023)
19.Schmauch B., Elsoukkary S.S. et al. Combining a deep learning model with clinical data better predicts hepatocellular carcinoma behavior following surgery// Journal of Pathology Informatics. 2024. Vol. 15. 100360,
https://doi.org/10.1016/j.jpi.2023.100360.
20. Ultralytics YOLOv8 Docs [Электронный ресурс]: URL:
https://docs.ultralytics.com/ (дата обращения: 15.09.2023)
21. TensorBoard [Электронный ресурс]: URL:
https://www.tensorflow.org/tensorboard?hl=ru (дата обращения: 15.09.2023)