Nat Biomed Eng |\u00A0陈晓军/张铭志/郑策/赵培泉合作开发显微眼科手术识别与导航的视频模型——OVFM

背景：在医疗人工智能领域，基础模型在术前任务中进展显著，但受限于高质量手术数据匮乏和实时计算瓶颈，其在术中应用面临挑战。研究目的：为克服上述难题，研究团队旨在开发一种专为显微眼科手术识别与导航设计的眼科视频基础模型（OVFM）及增强现实导航系统。结论：通过构建大规模眼科手术视频数据集，并基于自监督视频Transformer架构进行预训练，OVFM在多个下游任务中超越现有模型。通过双阶段知识蒸馏框架将模型压缩，实现了在手术显微镜边缘处理单元中的实时部署。基于此的导航系统在离体猪眼实验中显著改善了关键手术指标，尤其提升了新手医生的操作性能，为智能超显微外科手术导航及机器人系统研发提供了新的技术路径。