活动 | 徕卡AR技术亮相太原神经外科会—将不可能变为可能

在血管神经外科手术中，手术显微镜用于放大、提供明亮的手术视野。虽然显微镜卓越的图像质量和光学放大效果令外科医生受益匪浅，但目前其局限性促使外科医生必须依靠他们的色彩敏锐度辨别不同的组织类型。挑战之一是同时对组织结构和血流动态进行实时的观察和评估。目前已开发出的荧光技术，比如近红外（NIR）成像方法与吲哚菁绿（ICG）造影剂相结合，通过实现高对比度血流可视化为外科医生提供了辅助手段。但是，这些技术也有局限，尤其是不能同时观察血流和解剖结构细节，而且仅仅生成黑白图像。

Leica推出的可视化新技术MFL800增强现实（AR）荧光利用了荧光与ICG结合所产生的高对比度，克服了之前技术的许多局限性，它可以提供血流和解剖结构的实时、多光谱颜色图像，因此帮助外科医生更加自信地开展和评估手术治疗。

图1：MLF800功能下的颅内血管动脉瘤荧光视图。

我们为何需要这一步

NIR荧光与ICG结合的应用，如Leica FL800血管荧光造影模块，已经帮助神经外科医生挽救了无数的生命。但是，由于传统ICG血管荧光造影是将不可见光通过红外摄像头拍摄呈现在显示屏上，并且只能是在显示屏上进行呈现出黑白荧光图像；而清晰的白光解剖图像此时只能通过显微镜的目镜进行观察。

外科医生需要分别观看不同的成像模式，记录每种模式下观察到的有用特征，然后在大脑中将这些信息融合在一起，生成被观察组织和血流的复合“图像”。这项操作必须在开展治疗（比如动脉瘤夹闭术）前完成。

图2：动脉瘤夹闭术夹闭前图像，外科医生开展手术治疗之前必须脑补合并后的图像内容（FL800NIR荧光和白光）

这项任务造成外科医生时间和精力过度消耗的问题，而且由于难以记住黑白NIR荧光图像的所有空间特征，荧光图像的一些细节可能被忽略掉。即使夹闭后问题仍然存在。

图3：动脉瘤夹闭术夹闭后图像，外科医生评估手术治疗之前必须脑补合并后的图像内容（FL800NIR荧光和白光）。

使用NIR荧光问题更加复杂，因为荧光只产生微弱的信号，而且其测量受到显微镜工作距离和放大倍数强烈影响。外科医生只能比较一幅图像中的荧光强度，无法在不同病变位置之间进行比较。

Leica凭借MFL800增强现实AR荧光 技术，已经着手解决外科显微镜手术中遇到的这一重大难题。

MFL800增强现实AR荧光模块

MFL800是来自Leica GLOW AR平台的第一个产品，是一个克服上述局限性、增强操作体验效果的新增强现实产品。它将吲哚菁绿（ICG）NIR荧光信号精确叠加到白光图像上并合并成一张图片。拥有了这项功能，外科医生可以在同一时间对单幅图像中的ICG荧光和白光信息一目了然 —— 医生可以评估实时的血流和解剖结构。

MFL800增强现实AR荧光模块

Leica GLOW AR 平台应用新的多光谱成像技术，该技术允许在白光或荧光模式下不同光谱带中同时捕捉多个图像。这项技术采用光谱多路复用技术实现白光和荧光照明，这样一来，精确混合的白光和荧光激发光照射到组织上，与此同时，多光谱成像传感器利用先进的过滤技术消除不同光谱带之间可能存在的任何干扰。

具体而言，在MFL800增强现实AR荧光模块中，白光成像照明包含波长约为400～700 nm的可见光和波长约为700～790 nm的近红外光ICG荧光激发光。所有波长超过790 nm的光都被过滤掉，以免它们干扰荧光发射信号。MFL800多光谱传感器使用滤光片实现四个光谱带的单独测量：白光图像重建中涉及的红光、绿光和蓝光以及ICG荧光可视化中波长为835～880 nm的NIR发射光。 GLOW AR软件对可见光和非可见NIR视频流进行了合并。用户可以看到手术部位的高清视频，其中同时显示荧光信号和白光解剖信息。

以下谱图（图4）显示人眼可见和不可见的光波长。非可见光范围内的荧光团经激发后，人眼可透过MFL800模块功能“看见”它们。

图4：MFL800光谱：绿色曲线表示可见光（400～700 nm）

表1

MFL800增强现实AR荧光模块使用视频处理单元（VPU）采集、处理和显示摄像头（内置于显微镜光学头）拍下的两个视频流数据。这种图像处理提供如下关键功能。

NIR荧光的标准图像只有黑白两种颜色，但MFL800用户可以根据个人喜好选择7种不同的颜色（见下图5和表2）以观察白光荧光信号。

图5：可视化荧光颜色概览

表2

为了克服手术显微镜系统亮度分布的不均匀性，传入的每一帧都使用均化处理，该处理系统基于显微镜设置（工作距离、放大倍数、光圈、照明）进行像素级分区，使测量亮度归一化，如下图6所示。系统使用与每个图像成比例的补偿系数。通过亮度均化，可以补偿偏重中央区域的照明效果。均化值范围为0%（无）～100%（最大）。

图6：非均化图像和均化图像。非均化图像亮度不均匀，一些区域较暗，尤其是视野外侧。在均化图像中，全部区域亮度均匀，荧光信息在整个视野中更加稳定。

此外，为了补偿手术部位到两个传感器芯片之间光路的任何差异，荧光图像在均化处理前进行旋转、平移和缩放变换。运行时应用双线性插值，从周围像素推导非整数原点坐标处的荧光强度。

所获图像的亮度随工作距离和放大倍数的增大以及光强度的减弱而减小。为了补偿该减小值，对荧光图像使用比例系数。

强度相对于物体细节调节荧光对比度、亮度和透明度。强度值范围为0%（刚好看见荧光/组织结构占主导地位）～100%（荧光可见度高，占主导地位）。

通过使用Leica M530手术显微镜，MFL800增强现实AR荧光模块使用户能够应用NIR荧光评估多光谱全色血流。激活MFL800模式时，徕卡显微镜的白光照明扩展到近红外激发药物（ICG）荧光，被过滤的（ICG）NIR荧光信号经由NIR敏感型摄像机采集，并在MFL800 VPU中处理。

图7：图1中的动脉瘤夹闭后的视图。血流和解剖结构颜色鲜明，外科医生可以更好地评估夹闭后的动脉瘤夹和血流。

MFL800增强现实AR荧光提供两种不同的观察模式：传统荧光黑白图像和AR图像同时并列显示视图，或者仅黑白荧光视图。在两种观察模式中，都可以通过徕卡手术显微镜视频显示器或显微镜目镜（需配置Leica CaptiView图像投射模块）观察荧光信号。

MFL800模块使用增强现实算法实现高水平同步效果，确保颜色自然并完全融入图像中，无需考虑观察工具——2D屏幕、3D1屏幕或显微镜目镜（需配置CaptiView模块）。这些算法还确保不出现异步运动或延迟。

MFL800模块的这些功能使其成为外科医生的有用工具，他们可以同时观察血流和解剖组织。

图8：动脉瘤夹闭前。

图9：动脉瘤夹闭后。