基于STM32的全自动病理染色控制系统的设计与实现
1.
2.
Design and implementation of fully automatic pathological staining control system based on STM32
1.
2.
通讯作者:
收稿日期: 2021-12-20 修回日期: 2022-02-14
Received: 2021-12-20 Revised: 2022-02-14
作者简介 About authors
谭鑫平(1999—),男,湖南衡阳人,硕士生,从事嵌入式系统、数字图像处理和深度学习研究,E-mail:xinping_
关键词:
Keywords:
本文引用格式
谭鑫平, 甘浪, 林成旭, 李雪梅, 李倩, 闫旺, 陈刚, 廖广兰, 刘智勇.
TAN Xin-ping, GAN Lang, LIN Cheng-xu, LI Xue-mei, LI Qian, YAN Wang, CHEN Gang, LIAO Guang-lan, LIU Zhi-yong.
传统的手工病理切片染色须耗费人力和物力,且存在周期长、操作繁琐等缺点,不适用于对大量样本的染色[4-5];同时,染色过程中的操作失误和环境变化也会对染色结果产生影响。在机电一体化技术不断发展的背景下,自动化病理染色系统应运而生。然而,目前国内的自动化病理染色技术还不成熟,FISH染色的全自动化水平不高。如厦门通灵生物医药科技有限公司推出的Aliya自动免疫组化染色仪,只能实现烤片、脱蜡等部分FISH染色功能。国外自动染色系统的价格昂贵,而采用国产自动化染色机进行FISH染色时可能出现多种问题而导致临床诊断出现失误[6-10],比如:在染色过程中会出现试剂少滴、多滴或未滴的情况,导致染色效果不佳;在加下一试剂时,上一次滴加的试剂未完全去除而产生弱染色;染色剂滴加位置产生偏差,导致染色不均匀。究其原因,是染色控制系统存在诸多缺陷。
因此,笔者面向FISH染色技术,以全自动病理染色控制系统为研究对象,针对当前自动化染色技术存在的缺陷与不足,利用Keil5开发系统、QT和Microsoft Visual Studio开发软件,基于STM32和GUI(graphical user interface,图形用户界面)开展染色控制系统的优化设计与实现,解决自动染色控制系统存在的关键问题,研发高效率、高鲁棒性、高度集成化的染色控制系统,以提高病理染色的质量和效率。
1 染色控制系统组成
染色控制系统包括指令控制系统、执行控制系统和电源模块三大部分,如图1所示。指令控制系统由上位机和下位机组成,其根据用户选择生成控制指令。执行控制系统包括运动控制模块、传感反馈模块、温度控制模块、继电器模块和故障报警模块,各模块分别与上位机或下位机直接连接。其中:运动控制模块实现对电机、蠕动泵、注射泵运动的控制;传感反馈模块采用下位机反馈与多种传感器监测相结合的模式,实现对系统开机状态、启停状态、运行时间、剩余时间、运行步骤、空腔温度及湿度、串口连接状态、电机状态等的实时监测。上位机、下位机和执行控制系统之间通过有线连接的方式进行通信。
图1
2 染色控制系统硬件设计
2.1 STM32F103ZET6
为了满足染色控制系统响应快速和功耗低的要求,选用意法半导体有限公司(ST Microelectronics)生产的STM32F103ZET6单片微型计算机作为下位机控制器。这种嵌入式单片机采用32位CM3作为内核处理器[11],其芯片采用最佳代码密度,具有可预见的运行时间和改进的调试功能,能够在低动态功耗下实现高性能。该单片机的I/O (input/output,输入/输出)口多达112个,一共具有8个定时器[12-13];另外,开发板不仅板载了一组3.3 V和一组5 V的电源输出,还有一个适合DC 6~24 V输入的外部电源输入口来保证5 V电源的稳定性。单片机提供USB (universal serial bus,通用串行总线)串口、电源接口和数字/模拟组合接口等10多种接口,能够满足复杂控制系统的需求。
2.2 传感系统设计
本研究中,传感系统主要包括气泡传感器、光电开关、光纤传感器和气体压力传感器等传感器件。
气泡传感器用于检测蠕动泵运转是否正常。选用美国泰科电子有限公司的AD-101超声波气泡传感器,其响应时间为0.22 ms,工作温度范围为0~40 ℃,输出3.3 V的TTL (transistor-transistor logic,晶体管‒晶体管逻辑)电平信号。
光电开关用于电机初始位置校准。选用日本Panasonic公司的PM‒L25光学传感器,其检测间距为6 mm,重复精度可达0.1 mm,反应时间小于80 μs,工作温度范围为-25~55 ℃。
光纤传感器用于检测移液枪头是否提取成功。选用惠州博得公司的漫反射光纤传感器,其反应时间为400 μs,消耗电流在400 mA以下,工作温度范围为-10~55 ℃。
气体压力传感器用于检测盖玻片是否提取成功。选用风启电子科技有限公司的XGZP6847A气体压力传感器,其测压范围为-100~0 kPa,工作温度范围为-20~100 ℃。
2.3 主电路设计
采用平板电脑作为上位机,型号为Surface Go 2,其配置如下:CPU为Intel(R) Pentium(R) Gold Processor 4425Y @ 1.70 GHz;GPU为Intel(R) UHD Graphics 615;内存容量为4 GB,存储容量为128 GB;操作系统为Windows 10。为了实现电机、蠕动泵、注射泵等部件的协调运动,设计了以STM32为核心的主电路。其包括电脑与STM32之间的串口通信电路、STM32与运动部件(M1至M6)之间的驱动电路和电源与STM32电源控制器(power controller,PWR)之间的外围电路。主电路连接如图2所示。
图2
图2
染色控制系统主电路连接示意
Fig.2
Main circuit connection schematic of staining control system
运动部件主要包括伺服电机(M1)、直线电机(M2)、蠕动泵(M3)、微量注射泵(M4)、真空泵(M5)和气泵(M6)。M1选用雷赛智能控制股份有限公司的42CME08伺服电机;M2选用宁波格特威电机有限公司的11HY3401‒25D52型直线步进电机;M3选用卡默尔流体科技(上海)有限公司的KCS‒SA‒A‒B166蠕动泵;M4选用美国TRICONTINENT公司的Air‒Z Legacy微量注射泵;M5和M6分别选用德国THOMAS公司的1410隔膜真空泵和6015SE气泵。主要运动部件的参数如表1所示。Driver1至Driver4为驱动器,除与电机或泵配套的驱动器外,其余驱动器选用德轩电机有限公司的DM420驱动器。
表1 染色控制系统主要运动部件的参数
Table 1
部件代号 | 部件类型 | 型号 | 主参数 | 精度 |
---|---|---|---|---|
M1 | 伺服电机 | 42CME08 | 保持转矩为0.8 Nm | 步距角为1.8° |
M2 | 直线电机 | 11HY3401‒25D52 | 保持转矩为0.06 Nm | 步距角为1.8° |
M3 | 蠕动泵 | KCS‒SA‒A‒B166 | 流量为40 mL/min | 2% |
M4 | 微量注射泵 | Air‒Z Legacy | 量程为200 μL | ±3% |
M5 | 真空泵 | 1410V DC | 最终真空度为75% | |
M6 | 气泵 | 6015SE/24V DC | 最大持续压强为14 kPa |
多个伺服电机与直线电机的配合运动使机械部件达到预定位置。利用蠕动泵实现染色过程中试剂滴加功能。对于体积精度要求较高的微量试剂,则利用高精度微量注射泵实现对试剂量的精确控制,以避免试剂量误差对染色效果的影响。利用真空泵实现盖玻片的吸取,避免在高温下试剂挥发,充分保证试剂与样本反应,以保证染色效果。利用气泵对残留试剂进行清除,以避免弱染色。
3 染色控制系统软件设计
3.1 下位机软件设计
以STM32F103ZET6为核心的下位机包括中央处理器(central processing unit,CPU)、通信模块、中断模块、时钟模块和I/O模块,如图3所示。STM32的通信模式有串行和并行两种,不同的串口有不同的I/O引脚配置,上位机传输的数据经过转换后被下位机接收;中断模块用来处理主程序以外的异常情况,初始化时须设置中断的抢占优先级和响应优先级,产生中断时进入中断服务函数进行事件处理;时钟模块在一定的时钟频率下通过装载计数的方式实现定时器功能,在初始化时须进行时钟使能和预分频设置;I/O模块通过端口使能和工作模式设置配置引脚功能,引脚除了作为普通I/O端口使用外,还具有复用和重映射功能。通信模块与中断模块共同负责下位机与上位机之间的通信,时钟模块负责设置外设所需要的时钟频率,I/O模块通过控制引脚信号或脉冲的输入输出来控制执行部件的运动。
图3
染色控制系统的执行部件主要有2种驱动方式:脉冲驱动和电源直接驱动。脉冲驱动方式是指在相应的硬件连接下,单片机输出有一定规律的脉冲就能使执行部件工作的驱动方式。系统中M1、M2、M3、M4的驱动方式为脉冲驱动,其运动方向由方向控制信号的电平高低决定。电源直接驱动方式是指将执行部件连上电源就能使其工作的驱动方式,其通过设置单片机电平引脚的高低电平控制继电器的通断来实现执行部件的启停控制。系统中M5和M6由电源直接驱动。在硬件连接的基础上,通过单片机的脉冲引脚和电平引脚控制执行部件的运动。STM32 I/O模块的引脚分配如表2所示。
表2 STM32 I/O模块的引脚分配
Table 2
执行部件 | 脉冲引脚 | 电平引脚 |
---|---|---|
M1 | PD5 | PD6 |
M2 | PD1 | PD2 |
M3 | PA1 | PA5 |
M4 | PF1 | PF2 |
M5 | PE2 | |
M6 | PE0 |
在Keil5开发系统中,采用C语言编写执行部件运动控制程序,经编译后用FlyMcu软件烧录至STM32开发板。系统上电后,单片机首先进行初始化,包括使能时钟、设置端口模式、配置串口中断等;随后,控制系统实现自动复位,并等候上位机发出运动指令;待控制系统收到上位机发出的运动指令后,单片机控制执行部件作出相应的运动来完成全自动病理染色工作。下位机程序流程框图如图4所示。
图4
3.2 上位机软件设计
上位机包括GUI、显示单元、人机交互单元、逻辑处理单元和通信单元,如图5所示。GUI由文本框、分组框、菜单栏和工具栏等组成;显示单元实现图形、图像、文本和文件的显示;人机交互单元通过按钮、编辑框、单选框和下拉框等控件实现人机直接交互;逻辑处理单元在读取数据后对数据进行处理,也能实现文件加载和API (application programming interface,应用程序接口)调用;通信单元根据通信协议进行串口配置,从而实现数据的发送和接收。GUI、显示单元和人机交互单元共同实现人机交互功能,逻辑处理单元用以保存和处理用户数据,通信单元完成上位机与下位机、温度控制模块之间的通信。
图5
表3 面向FISH染色的全自动病理染色系统的染色步骤
Table 3
步骤 | 操作 | 试剂 | 时间/min |
---|---|---|---|
1 | 烤片 | 无 | 30 |
2 | 脱蜡 | 脱蜡剂 | 15 |
3 | 洗涤 | 100%乙醇 | 4 |
4 | 通透 | 通透剂 | 25 |
5 | 水处理 | 去离子水 | 6 |
6 | 酶处理 | 蛋白酶 | 30 |
7 | 乙醇处理 | 梯度乙醇 | 12 |
8 | 变性 | 探针 | 5 |
9 | 杂交 | 探针 | 123 |
10 | 洗涤 | 洗涤液、去离子水 | 8 |
11 | 染色 | DAPI染色剂 | 1 |
根据控制要求设计人机交互界面。在Microsoft Visual Studio软件中添加QT库,采用QT Designer Version 5.13.0设计GUI界面,在Microsoft Visual Studio 2017开发环境中采用C++语言进行界面程序编写。所开发的染色控制系统的GUI界面如图6所示。该系统可以控制12块切片的染色过程,配置了3种染色模式,每种模式对应不同切片类型的染色流程。通过点击主窗口上方代表载玻片位置的数字按钮选择每一块载玻片上样本的执行模式,在复选框选择试剂类型,利用中心表格和剩余时间显示当前系统的运行进度。染色过程中通透剂和蛋白酶的反应时间、杂交和变性的温度和时间可以进行设置,其他步骤的温度和时间是固定的。
图6
用户通过鼠标和键盘设置染色系统的执行步骤,界面控件状态用底层数据记录。控件主要包括按钮(PushBotton)、分组框(GroupBox)、文本框(Label)、菜单栏(MenuBar)、编辑框(LineEdit)和复选框(ComboBox),在C++程序中定义状态变量来记录控件状态。界面状态变量及其事件、设定值如表4所示。
表4 界面状态变量及其事件、设定值
Table 4
状态变量 | 说明 | 事件 | 设定值 |
---|---|---|---|
Pushbtn | 记录载玻片执行模式 | 鼠标点击载玻片 | 0~3(12位) |
SumPushbtn | 记录用户是否选择载玻片 | 没有载玻片被选择 | 0 |
已有载玻片被选择 | 1~12 | ||
Flagstart | 记录“开始”按钮状态 | 按下状态 | 1 |
弹起状态 | 0 | ||
Flagstop | 记录“暂停”按钮状态 | 按下状态 | 1 |
弹起状态 | 0 | ||
Permeationtime | 记录“通透”步骤时间 | 编辑框输入 | 用户设置 |
Proteintime | 记录“酶处理”步骤时间 | 编辑框输入 | 用户设置 |
Totaltime | 记录系统运行总时间 | 用户设置时间 | 实时变化 |
上位机通信单元通过USB数据线分别与STM32开发板和温度控制模块进行实时通信,并分别定义通信协议。上位机与开发板之间遵循USART(universal synchronous/asynchronous receiver/transmitter,通用同步/异步串行接收/发送器)串口通信协议,由上位机传输给开发板的数据通过输入移位寄存器后存至输入数据缓冲器,再由MCU (micro control unit,微控制单元)内核处理。上位机与温度控制模块之间采用Modbus通信协议,采用RS485接口标准,上位机传输数据格式为 1个起始位、无校验位、2个停止位,数据传输速率为9 600 bit/s。GUI界面的相关设置数据通过T口USB数据线由电脑发送给STM32开发板从而控制执行部件的运动,界面将所需温度传输给温度控制模块以控制试剂反应温度;在运行过程中,系统当前状态和当前温度也实时反馈给上位机。通信内容及STM32数据传输过程如图7所示。
图7
图7
通信内容及STM32数据传输过程
Fig.7
Communication content and STM32 data transmission process
图8
4 全自动病理染色实验及其结果分析
根据FISH染色需求设计并开发了全自动病理染色系统。其模型渲染图及结构实物图如图9所示。系统长为850 mm,宽为500 mm,高为540 mm,净重60 kg;主要由X、Y、Z三轴运动模块、切片预处理模块、微量试剂滴加模块、密封模块和加热模块等构成。系统可同时完成12个样本的FISH染色,温控范围为室温至110 ℃,温控精度为±1 ℃,可以在2 min内从37 ℃升温至95 ℃。
图9
图9
全自动病理染色系统模型渲染图及结构实物图
Fig.9
Model rendering diagram and physical structure diagram of fully automatic pathological staining system
利用所研发的全自动病理染色系统进行实验。在通透25 min、酶处理30 min、变性85℃‒5 min和杂交42 ℃‒2 h的条件下进行单片组织样本染色实验。人机交互时间为55 s,整个流程运行时间为281 min,其中试剂反应时间占比为92.17%,机械运动时间占比为7.83%。实验中通过测量可知,滴加试剂的位置精度达到0.05 mm,试剂体积精度达到0.6 μL,在盖玻片作用下试剂对样本的覆盖率达到93%以上,气泵处理后试剂残留小于50 μL,设备故障响应时间小于0.5 s。实验完成后将样本置于荧光显微镜下观察,得到的荧光图像如图10所示。由图可知,荧光图像的对比度高,信号点明显,细胞边界清晰,染色均匀,达到了病理判读的要求。在不同温湿度环境下对不同样本进行多次染色实验后可知,设备运行故障率小于3%,滴加试剂类型的准确率为100%,且染色效果良好,图像可判读率达到90%以上。
图10
实验结果表明,所研发的全自动病理染色控制系统能够实现多样本FISH染色的全自动化过程控制。该控制系统采用有线传输方式实现了上位机、下位机与执行控制系统三者之间的有效通信,保证了数据传输的稳定性。采用多传感器融合的传感反馈模块实时监控系统运行状态,有效提升了系统鲁棒性和病理染色质量。选择STM32F103ZET6单片微型计算机作为下位机控制器,设计了控制系统主电路及辅助电路,实现了多个执行部件在互不干扰状态下的协调运动,提高了系统稳定性。选用高精度伺服电机和微量注射泵用于试剂的提取与滴加,结合传感反馈模块保证了试剂量的准确性,有效避免了弱染色和染色不均的情况,保证了染色效果。基于QT开发软件和Microsoft Visual Studio开发环境设计了上位机人机交互GUI界面,采用C++状态变量记录用户操作,通过优化染色模式选择方案节约了人机交互时间成本。利用该控制系统能够一次性实现12个样本的FISH染色全自动化,且可以同时处理不同类型的样本,极大地提升了染色效率,同时避免了手工染色中的环境干扰因素,进一步提升了染色质量。
将所研发的全自动病理染色系统与市场上已有的FISH自动染色系统进行比较,相关参数对比如表5所示。可以看出,相较于已有的染色系统,本系统在整机尺寸、质量、温度范围、升温速度、温控精度和自动化程度等方面具有一定优势。
表5 所研发的全自动病理染色系统与已有自动化染色系统的参数对比
Table 5
生产商 | 仪器 | 整机长×宽×高/mm×mm×mm | 整机 质量/kg | 温度 范围/℃ | 最低升温 速度/(℃/min) | 温控精度/℃ | 最少试剂加样量/ μL | 是否全自动化 |
---|---|---|---|---|---|---|---|---|
中国厦门通灵生物医药科技有限公司 | Aliya全自动免疫组化染色仪 | 1 075×780×870 | 110 | 室温~100 | — | ±3 | 70 | 否 |
美国BioGenex公司 | Xmatrx全自动病理 切片染色系统 | 1 163×737×1499 | 182 | 室温~105 | 29 | ±0.5 | 5 | 是 |
瑞士Roche公司 | BenchMark ULTRA 自动病理组织染色机 | 1 118×841×1585 | 295 | 室温~100 | 14.5 | — | — | 是 |
武汉康录生物技术股份有限公司 | 笔者研发的染色系统 | 850×500×540 | 60 | 室温~110 | 29 | ±1 | 5 | 是 |
5 结 语
面向FISH染色技术,利用Keil5和Microsoft Visual Studio 2017开发环境,采用C语言和C++语言开发了基于STM32和GUI的全自动病理染色控制系统,取得了以下良好效果:
1)所研发的病理染色控制系统能够实现对多样本FISH染色过程的全自动化控制,且控制系统具有高稳定性、高精度和良好的鲁棒性。
2)采用传感反馈模块实现对染色过程的实时监测,结合伺服电机和高精度注射泵能够在防止环境干扰的前提下保证试剂量的精准度,有效避免了染色不均和弱染色现象,提升了病理染色质量。
3)所设计的GUI人机交互界面能够在实现相关参数设置的前提下节约人机交互成本,方便用户操作,体现了人机工程相关理念。
参考文献
分析HE染色技术在病理诊断中的应用
[J].
Analysis of the application of HE staining in pathological diagnosis
[J].
DAPI: A DNA-specific fluorescent probe
[J].
Annexin V-FITC/DAPI细胞凋亡检测法
[J].
Annexin V-FITC/DAPI cell apoptosis detection method
[J].
全自动染色机与手工染色的比较及其染色程序的改进
[J].
Comparison between automatic dyeing machine and manual dyeing and improvement of dyeing procedure
[J].
HE徕卡全自动染色机和手工染色的对比分析
[J].
Comparative analysis of HE Leica automatic dyeing machine and manual dyeing
[J].
新一代全自动滴染式染色机在病理常规染色中的优势和应用评价
[J].
Advantages and application evaluation of a new generation of automatic drop dyeing machine in routine pathological staining
[J].
全自动免疫组化染色仪染色失败的常见原因及改进措施
[J].
Common causes and improvement measures of staining failure of automatic immunohistochemical staining instrument
[J].DOI:10.3969/j.issn.1001-7399.2013.03.031
国产全自动染色机在常规染色中的应用
[J].
Application of domestic automatic dyeing machine in conventional dyeing
[J].DOI:10.3969/j.issn.1007-8096.2019.01.019
免疫组织化学标准化(二)
[J].
Immunohistochemical standardization(II)
[J].DOI:10.3969/j.issn.1007-8096.2008.02.036
DAPI staining and fluorescence microscopy techniques for phytoplasmas
[J].
基于STM32的智能语音药箱控制系统的设计
[J].
Design of intelligent voice medicine box control system based on STM32
[J].DOI:10.3969/j.issn.1006-5059.2021.01.008 [本文引用: 1]
Hyperspectral microscopy combined with DAPI staining for the identification of hepatic carcinoma cells
[J].
HE染色原理和试剂配制及染色过程中的若干问题的探讨
[J].
Discussion on HE dyeing principle, reagent preparation and some problems in dyeing process
[J].
环保透明脱蜡液Van-Clear与传统试剂在组织处理后HE染色及FISH法检测乳腺癌HER2基因中的比较
[J].
Comparison of tissue dewaxing by environment-friendly transparent dewaxing solution Van-Clear and conventional reagents for he staining and detection of HER2 genes by FISH in breast cancer tissues
[J].
多源信息融合方法研究
[D].
Research on multi-source information fusion method
[D].
基于多源信息融合的状态估计方法研究
[D].
Research on state estimation method based on multi-source information fusion
[D].
基于特征判别的多源信息融合方法研究
[D].
Research on multi-source information fusion method based on feature discrimination
[D].
基于多源冲突证据信息融合的测试性评估方法
[J].
Testability evaluation method of equipment based on information fusion for multi-source conflict evidence
[J].DOI:10.1145/3357292.3357308 [本文引用: 1]
/
〈 |
|
〉 |
