多光子显微镜成像技术：偏振分辨倍频显微镜及其图像处理
在非线性光学显微镜中，二倍频（shg）成像通常用于观测内源性纤维状结构，且shg的强度很大程度上取决于入射光束的偏振方向与目标分子取向轴之间的相对角度。因此，基于偏振的shg成像（p－shg），可通过分析shg信号强度与入射光束的偏振态之间的函数关系，来获得目标分子的结构信息。其现在已用作医学和生物学分析的重要工具。
简单的shg图像可以通过传统的双光子激发荧光显微镜（tpm）获得。大多数tpm系统仍采用基于运动镜面的单束扫描方法，其时间分辨率取决于镜面的物理移动速度。为了实现更高速的成像，tpm系统还可以采用多束扫描的方法（图1a），其中之一便是利用转盘扫描单元。该单元由共轴的微透镜转盘和针孔转盘构成，两个转盘上的微透镜和针孔一一对应。
激光在通过微透镜转盘时，波前会覆盖多个微透镜，不同微透镜将波前各部分聚焦到不同的位置，并穿过对应的针孔，形成多个微光束。这些微光束打到样品上，可同时激发多个信号。这些信号沿显微镜系统返回并再次穿过针孔，最后被两个转盘之间的二向色镜反射到检测装置中。然而，常规使用的锁模钛宝石激光器作为光源能量不足，限制了激发光束的数量，导致使用转盘扫描单元的tpm （tpm－sd） 的有效视场 （fov） 很小。
ai goto等人想通过tpm－sd系统实现高速的p－shg成像，并保证大的fov，故在tpm－sd系统中引入了峰值功率更高的基于yb的激光光源。
图1是他们开发的tpm－sd系统示意图。该系统光源为基于yb的激光器，产生的飞秒脉冲中心波长为1042 nm、平均功率4 w、脉宽300 fs，重复频率10 mhz。系统首先通过半波片和格兰激光偏振器来调节激光功率，接着通过扩束器进行扩束，扩束后的光束被引入到转盘扫描单元中，接着从扫描单元出来的多个微光束通过水浸物镜被聚焦在样品的多个点上。为了调整光束在物镜处的偏振态，激发光束的光路上放置了一个半波片和一个四分之一波片。
为了测量样品上入射光束的偏振态，在物镜后端放置了一个线性偏振膜。在这项研究中，他们使用了圆偏振光（图1b；椭圆度0．95）和4种线偏振光束（图1c－f；椭圆度0．2－0．3）。以fov的水平轴为基准，将横向偏振角设置为0、45、90和135°。物镜收集到的荧光或shg光通过针孔转盘，被二向色镜反射至偏振分束器。偏振分束器将信号分离为一对偏振分辨信号，它们被放大倍数为×1．2的中继透镜分别聚焦在电子倍增ccd相机的不同方形检测区域上，从而同时获取一对矩形图像。轴向扫描是通过压电驱动器实现的。
总之，该组通过tpm－sd系统，开发了一种高速的偏振分辨成像方法。他们使用该系统对固定的小鼠皮肤样品和骨骼肌样品（离体）以及活体小鼠的骨骼肌进行了成像，证明了该系统能以56 hz的时间分辨率对体内组织成像，获取胶原纤维的结构信息。
图1 （a） tpm－sd系统；（b–f） 通过调整hwp和qwp的位置，改变入射光脉冲在样品上的偏振态。［1］
非线性成像技术的优化，除了基于图像获取模式的优化，还可以从先进的图像处理算法入手。发展图像的实时分析工具，以帮助病理学家快速表征组织特性，实现自动化的病症诊断，具有极大的推动医学发展的潜力。目前，用于自动提取疾病特征的用户独立算法引起了越来越多的关注。2019年，riccardo scodellaro等人开发了一种针对p－shg的图像处理方法——μmapps（microscopic multiparametric analysis by phasor projection of polarization－dependent shg signal）。其原理是对每个像素的随入射光偏振态变化的shg信号（）进行二维相量分析，从中分析出各像素对应胶原蛋白纤维的平均取向角 （θf）和极化率各向异性参数（γ，极化率张量χ（2）的非对角线和对角线元素的比），并依此获得组织细胞外基质（ecm）中胶原蛋白的微结构信息。
该组的最终目标为无人员操作，全自动化，基于μmapps算法的病理学诊断：通过区分不同组织中不同的胶原蛋白结构，来区分正常组织和癌变组织。具体方法为，先通过μmapps重构每个像素的和信息，接着，将整个图像划分为包含大量感兴趣区域（roi）的网格，对每个roi的所有像素应用聚类算法，将和类似的像素归为一类（簇），至此，每个roi的像素都被分为了数十个簇，然后，基于不同roi中不同的分簇，定义一组参数 （p参数：簇数（nc），簇元素比（cer，每个簇与最大像素数量的簇，所含像素数量之比），和熵（s））， 以量化各roi中胶原蛋白结构的无序性。
最后，以所有roi参数的平均值为基准，将各roi区分为正常组织或癌变组织，并对应投影回原图像中。图2是基于熵值的肿瘤边缘分割结果。该组通过研究ct26（结肠癌）和4t1（乳腺癌）两种癌症模型，测试了该方法自动区分肿瘤和健康组织区域的准确率，并证明熵是在同一组织类型内，区分肿瘤与健康区域，判别肿瘤边缘的最佳参数。
图2 （a， b） 基于熵（s）的感兴趣区域（roi）的分析结果。每个150×150 ?m2的roi（a， b）都按照图例进行了颜色编码，以表示ct26的癌变区域（a）和4t1的癌变区域（b），及其中检索到的熵值。（c， d） 将roi分析结果反投影到ct26 （c）和4t1 （d） 肿瘤模型的原图像平面，并分割出癌变部分的图像。红色虚线表示肿瘤和正常组织的边界。 ［2］
参考文献
［1］ 2019． ai goto?， kohei otomo? and tomomi nemoto． real－time polarization－resolved imaging of living tissues based on two－photon excitation spinning－disk confocal microscopy
［2］ 2019． riccardo scodellaro， margaux bouzin， francesca mingozzi， laura d’alfonso，francesca granucci， maddalena collini， giuseppe chirico? and laura sironi?． whole－section tumor micro－architecture analysis by a two－dimensional phasor－based approach applied to polarization－dependent second harmonic imaging
阿里云的工程师向业界揭开了“舜天”的神秘面纱，新引擎初露锋芒
简单罗列一下便携式测产考种箱里面的配置工具
IGBT的双脉冲测试介绍
对ASIC AI应用的详细分析与发展前景
细菌电池新进展
多光子显微镜成像技术：偏振分辨倍频显微镜及其图像处理
ADI荣膺汤姆森路透2011全球100大最具创新力企业
中国在芯片创新领域获得了重大的技术突破
COT控制模式简述-5
360N5S什么时候出？360N5S今日发布，配置、外观遭京东泄密，还有两大亮点，价格却成疑
马斯克怒怼激光雷达技术引众怒，多传感器融合才是王道
学会这4招，轻松搞定开关电源EMI
Teledyne Imaging推出的Z-Trak2是一个全新的3D轮廓传感器系列
深鉴科技上市了吗_深鉴科技相关股票代码
作为防静电对策的使用事例及效果
智慧门禁系统升级，离不开人脸识别门禁终端的加持
STM32F1系列DEBUG调试功能需要配置吗？
Proteus8.9 VSM Studio GCC编译器仿真STM32F407ZGT6系列011_lcd1602并口
智慧热力：热力管网在线监测，热力管网自动化，热网监控系统
基于FPGA的数字电位器设计
简单的shg图像可以通过传统的双光子激发荧光显微镜（tpm）获得。大多数tpm系统仍采用基于运动镜面的单束扫描方法，其时间分辨率取决于镜面的物理移动速度。为了实现更高速的成像，tpm系统还可以采用多束扫描的方法（图1a），其中之一便是利用转盘扫描单元。该单元由共轴的微透镜转盘和针孔转盘构成，两个转盘上的微透镜和针孔一一对应。
激光在通过微透镜转盘时，波前会覆盖多个微透镜，不同微透镜将波前各部分聚焦到不同的位置，并穿过对应的针孔，形成多个微光束。这些微光束打到样品上，可同时激发多个信号。这些信号沿显微镜系统返回并再次穿过针孔，最后被两个转盘之间的二向色镜反射到检测装置中。然而，常规使用的锁模钛宝石激光器作为光源能量不足，限制了激发光束的数量，导致使用转盘扫描单元的tpm （tpm－sd） 的有效视场 （fov） 很小。
ai goto等人想通过tpm－sd系统实现高速的p－shg成像，并保证大的fov，故在tpm－sd系统中引入了峰值功率更高的基于yb的激光光源。
图1是他们开发的tpm－sd系统示意图。该系统光源为基于yb的激光器，产生的飞秒脉冲中心波长为1042 nm、平均功率4 w、脉宽300 fs，重复频率10 mhz。系统首先通过半波片和格兰激光偏振器来调节激光功率，接着通过扩束器进行扩束，扩束后的光束被引入到转盘扫描单元中，接着从扫描单元出来的多个微光束通过水浸物镜被聚焦在样品的多个点上。为了调整光束在物镜处的偏振态，激发光束的光路上放置了一个半波片和一个四分之一波片。
为了测量样品上入射光束的偏振态，在物镜后端放置了一个线性偏振膜。在这项研究中，他们使用了圆偏振光（图1b；椭圆度0．95）和4种线偏振光束（图1c－f；椭圆度0．2－0．3）。以fov的水平轴为基准，将横向偏振角设置为0、45、90和135°。物镜收集到的荧光或shg光通过针孔转盘，被二向色镜反射至偏振分束器。偏振分束器将信号分离为一对偏振分辨信号，它们被放大倍数为×1．2的中继透镜分别聚焦在电子倍增ccd相机的不同方形检测区域上，从而同时获取一对矩形图像。轴向扫描是通过压电驱动器实现的。
总之，该组通过tpm－sd系统，开发了一种高速的偏振分辨成像方法。他们使用该系统对固定的小鼠皮肤样品和骨骼肌样品（离体）以及活体小鼠的骨骼肌进行了成像，证明了该系统能以56 hz的时间分辨率对体内组织成像，获取胶原纤维的结构信息。
图1 （a） tpm－sd系统；（b–f） 通过调整hwp和qwp的位置，改变入射光脉冲在样品上的偏振态。［1］
非线性成像技术的优化，除了基于图像获取模式的优化，还可以从先进的图像处理算法入手。发展图像的实时分析工具，以帮助病理学家快速表征组织特性，实现自动化的病症诊断，具有极大的推动医学发展的潜力。目前，用于自动提取疾病特征的用户独立算法引起了越来越多的关注。2019年，riccardo scodellaro等人开发了一种针对p－shg的图像处理方法——μmapps（microscopic multiparametric analysis by phasor projection of polarization－dependent shg signal）。其原理是对每个像素的随入射光偏振态变化的shg信号（）进行二维相量分析，从中分析出各像素对应胶原蛋白纤维的平均取向角 （θf）和极化率各向异性参数（γ，极化率张量χ（2）的非对角线和对角线元素的比），并依此获得组织细胞外基质（ecm）中胶原蛋白的微结构信息。
该组的最终目标为无人员操作，全自动化，基于μmapps算法的病理学诊断：通过区分不同组织中不同的胶原蛋白结构，来区分正常组织和癌变组织。具体方法为，先通过μmapps重构每个像素的和信息，接着，将整个图像划分为包含大量感兴趣区域（roi）的网格，对每个roi的所有像素应用聚类算法，将和类似的像素归为一类（簇），至此，每个roi的像素都被分为了数十个簇，然后，基于不同roi中不同的分簇，定义一组参数 （p参数：簇数（nc），簇元素比（cer，每个簇与最大像素数量的簇，所含像素数量之比），和熵（s））， 以量化各roi中胶原蛋白结构的无序性。
最后，以所有roi参数的平均值为基准，将各roi区分为正常组织或癌变组织，并对应投影回原图像中。图2是基于熵值的肿瘤边缘分割结果。该组通过研究ct26（结肠癌）和4t1（乳腺癌）两种癌症模型，测试了该方法自动区分肿瘤和健康组织区域的准确率，并证明熵是在同一组织类型内，区分肿瘤与健康区域，判别肿瘤边缘的最佳参数。
图2 （a， b） 基于熵（s）的感兴趣区域（roi）的分析结果。每个150×150 ?m2的roi（a， b）都按照图例进行了颜色编码，以表示ct26的癌变区域（a）和4t1的癌变区域（b），及其中检索到的熵值。（c， d） 将roi分析结果反投影到ct26 （c）和4t1 （d） 肿瘤模型的原图像平面，并分割出癌变部分的图像。红色虚线表示肿瘤和正常组织的边界。 ［2］
参考文献
［1］ 2019． ai goto?， kohei otomo? and tomomi nemoto． real－time polarization－resolved imaging of living tissues based on two－photon excitation spinning－disk confocal microscopy
［2］ 2019． riccardo scodellaro， margaux bouzin， francesca mingozzi， laura d’alfonso，francesca granucci， maddalena collini， giuseppe chirico? and laura sironi?． whole－section tumor micro－architecture analysis by a two－dimensional phasor－based approach applied to polarization－dependent second harmonic imaging
阿里云的工程师向业界揭开了“舜天”的神秘面纱，新引擎初露锋芒
简单罗列一下便携式测产考种箱里面的配置工具
IGBT的双脉冲测试介绍
对ASIC AI应用的详细分析与发展前景
细菌电池新进展
多光子显微镜成像技术：偏振分辨倍频显微镜及其图像处理
ADI荣膺汤姆森路透2011全球100大最具创新力企业
中国在芯片创新领域获得了重大的技术突破
COT控制模式简述-5
360N5S什么时候出？360N5S今日发布，配置、外观遭京东泄密，还有两大亮点，价格却成疑
马斯克怒怼激光雷达技术引众怒，多传感器融合才是王道
学会这4招，轻松搞定开关电源EMI
Teledyne Imaging推出的Z-Trak2是一个全新的3D轮廓传感器系列
深鉴科技上市了吗_深鉴科技相关股票代码
作为防静电对策的使用事例及效果
智慧门禁系统升级，离不开人脸识别门禁终端的加持
STM32F1系列DEBUG调试功能需要配置吗？
Proteus8.9 VSM Studio GCC编译器仿真STM32F407ZGT6系列011_lcd1602并口
智慧热力：热力管网在线监测，热力管网自动化，热网监控系统
基于FPGA的数字电位器设计