深圳大学MUSIC实验室推出一款软件神器,大大提升(2)
精细的分割标注是医学影像标注中最为耗时的任务。不同的影像模态、解剖结构和病灶需要不同专业与资质的医生进行繁重的逐点分割标注。为解决上述关键问题,Pair团队研发了重磅的智能功能AutoSeg,旨在实现通用的解剖结构精细分割标注,大幅节省手动标注的耗时,进而推动AI影像研究的快速实现与普及。AutoSeg的优势特性如下:
无需任何配置,简单直接、方便易用
无需区分影像模态、解剖结构、病灶类型
1秒完成,普通笔记本电脑即可使用
一键框定操作,实现精细分割标注
据统计,使用Pair的AutoSeg自动分割标注功能,可节省约70%的分割标注耗时。Pair基于华为开源的深度学习平台MindSpore实现该功能,以MindSpore Lite完成最终部署。MindSpore Lite中高效的内核算子实现可以充分发挥普通CPU的硬件算力,有效平衡了模型算力需求和模型精度要求,使得推理耗时缩短至1秒内,极大地提升了AutoSeg的用户体验。
AutoSeg已在CT,MRI,超声,X-ray,PET,扫描电镜,病理,涂片,内窥镜等影像模态的多种解剖结构和病灶上验证和使用。AutoSeg的标注结果可便捷编辑修改,以方便用户微调和快速确认。如下是AutoSeg在多样化的影像和解剖结构上的应用展示:
AutoSeg功能对腹部、胸部CT影像的标注示例一
AutoSeg功能对肝脏CT影像的标注示例二
AutoSeg功能对脊柱CT影像的标注展示
AutoSeg功能对超声影像的标注展示
AutoSeg功能对脑部MRI影像的标注展示
AutoSeg功能对肺部X光影像的标注展示
AutoSeg功能对细胞涂片、切片的标注展示
AutoSeg功能对细胞切片的标注展示
AutoSeg功能对肠镜影像的标注展示
AIA --- 用户自定义AI模型的辅助标注AIA是Pair独有的一键AI推理功能,无论是分类、分割、点定位、目标检测以及多任务等,用户仅需提供自定义AI模型,点击AI按钮即可快速自动生成辅助标注,微调标注结果便完成标注工作,节省标注时间,加快工作流程。目前,Pair的AIA辅助标注功能可支持谷歌的Tensorflow和脸书的Pytorch深度学习平台,支持超过50种深度学习网络模型架构。Pair近期也添加了对国产的华为MindSpore深度学习框架模型的支持。
丰富的AI功能,包括分割、点定位、实例分割和检测
视频时间轴属性标注医学视频影像通常由不同事件的影像片段沿时间轴构成,不同片段会具有不同属性的标注需求,如心脏在心动周期的不同动作、手术器械在手术不同阶段的动作类型等。目前鲜有标注软件提供对医学视频影像的时间轴标注功能。Pair提供的时间轴标注功能,通过便捷的交互设计,可快速对视频的任意片段进行多种属性的标注,高效推动视频标注工作的进展。具体说来,在时间轴标注功能下,鼠标右键拖动选中的标签到时间轴上对应的帧,即可完成对改视频片段的属性标注。Pair还提供时间轴跟随功能,方便用户观察片段所属的帧。若要修改标注,左键点击对应时间轴的端点进行拖动即可,操作方便。
视频时间轴标注
多模态影像互补标注单一的影像模态使医生对病灶的定位和标注存在明显局限性。通过多模态信息的同步观察与互补使用,有利于医生准确标注病灶,如结合MRI中的T1与T2影像、多模态的超声影像、PET和CT影像、不同荧光染色的细胞涂片影像等。Pair提供的多模态影像互补标注功能可在标注过程同步显示不同模态的影像,降低医生对目标区域的定位和轮廓勾画的不确定度,有效帮助医生进行识别和标注。Pair提供的多模态标注功能可兼容二维、视频、三维和病理图像。
多模态影像互补标注过程
文章来源:《音乐研究》 网址: http://www.ylyjzz.cn/zonghexinwen/2022/0423/1190.html