清华大学施路平教授团队：类脑视觉感知芯片-“天眸芯”后续来了 | Nature Sensors

在开放场景中，视觉感知面临高速、高动态范围、频闪等极端成像挑战，传统机器视觉难以应对。受人类视觉系统通过视觉基元构建保持稳定感知能力的启发，清华大学施路平/赵蓉教授团队在Nature Sensors上发表研究，提出了一种两阶段学习框架。在自下而上阶段，该框架将结构化视觉先验嵌入中间表征，并通过自监督学习融合多类互补线索；在自上而下阶段，从内部模型提取的视觉知识能自适应调节下游感知算法，增强泛化与抗干扰能力。基于类脑视觉芯片“天眸芯”的评估显示，该方法显著提升了单目深度估计和视频实例分割等任务在严重视觉干扰下的性能。该研究不仅推动了人工智能视觉感知技术的发展，也为解读人类视觉机理提供了计算模型。