面向脑胶质瘤影像分析的混合现实技术
作者:
作者单位:

作者简介:

蔡林沁(1973-), 男, 博士, 教授, CCF专业会员, 主要研究领域为虚拟现实/增强现实, 深度学习, 模式识别;易文渊(1996-), 男, 硕士, 主要研究领域为医学图像处理, 增强现实/混合现实;黄宇婷(1996-), 女, 硕士, 主要研究领域为医学图像处理;代宇涵(1995-), 女, 硕士, 主要研究领域为深度学习, 图像检测, 医学图像

通讯作者:

易文渊, E-mail: s190301074@stu.cqupt.edu.cn

中图分类号:

TP391

基金项目:

国家重点研发计划国际科技创新合作专项(2017YFE0123000)


Mixed Reality Technology for Medical Imaging Analysis of Glioma
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    当前混合现实(MR)技术在数字医疗领域正日益受到广泛关注. 以脑胶质瘤医学影像分析混合现实技术为对象, 提出基于深度学习模型3D UNet的MR脑胶质瘤定位与区域分割算法, 采用基于面绘制方法对脑胶质瘤影像进行多结构组织的三维绘制与优化, 提出了基于交互式无标识和基于标识图的移动混合现实三维注册跟踪与视觉空间共享算法, 实现MR多设备的第三视角空间实时共享, 设计并实现了面向脑胶质瘤医学影像分析的混合现实原型系统. 实验结果表明所提方法能有效实现MR脑胶质瘤检测、分割与三维重建, 通过MR移动设备的实时共享, 实现脑胶质瘤医学影像混合现实分析, 有效支撑脑胶质瘤辅助诊断与治疗, 也为手术术前规划、医学教育培训等提供了新的方法.

    Abstract:

    At present, mixed reality (MR) technology is gaining increasingly attention in digital medicine. Targeted at MR of glioma medical image analysis, this study proposes an MR glioma location and regional segmentation algorithm based on the 3D UNet deep learning model, and uses the surface rendering method to render and optimize multi-structure tissue of the glioma image in three-dimensional space. On this basis, three-dimensional registration tracking and visual space sharing algorithms are presented using the interactive markerless and the marker-based graphs for mobile MR to achieve the real-time third-view space sharing for MR multi-devices. In addition, an MR experimental system is designed and implemented for glioma medical image analysis. The experimental results show that the methods proposed in this paper can effectively realize the detection, segmentation and three-dimensional reconstruction of the brain glioma. Through the real-time sharing of mobile MR devices, the proposed methods can effectively achieve MR analysis of glioma medical images to support the auxiliary diagnosis and treatment of glioma, and it also can provide new methods for preoperative planning, medical education and training, etc.

    参考文献
    相似文献
    引证文献
引用本文

蔡林沁,易文渊,黄宇婷,代宇涵.面向脑胶质瘤影像分析的混合现实技术.软件学报,2022,33(9):3347-3369

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2021-03-04
  • 最后修改日期:2021-05-10
  • 录用日期:
  • 在线发布日期: 2022-07-07
  • 出版日期: 2022-09-06
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京市海淀区中关村南四街4号,邮政编码:100190
电话:010-62562563 传真:010-62562533 Email:jos@iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号