删除或更新信息,请邮件至freekaoyan#163.com(#换成@)

显微操作中斑马鱼幼鱼心脏识别与监测方法

本站小编 哈尔滨工业大学/2020-12-05

显微操作中斑马鱼幼鱼心脏识别与监测方法

佟明斯,黄港,雷冬旭,张格非,庄松霖,高会军

(哈尔滨工业大学 航天学院,哈尔滨 150001)



摘要:

斑马鱼作为一种典型的有脊椎模式动物,因其幼鱼具有与人类基因相似度高、身体透明方便观察等特点在生物医学领域被广泛研究.其中识别和监测斑马鱼幼鱼心脏对研究心血管疾病的发病机理、药物影响等至关重要.为解决常规显微操作技术对各向异性的斑马鱼幼鱼在操作和观测上的困难,提出了一种基于显微视觉技术的高通量斑马鱼幼鱼心脏识别和监测方法.首先通过混合高斯模型确定多斑马鱼幼鱼个体的位置和二维平面的姿态,在将其中一条斑马鱼幼鱼移动到视野中心后,基于卷积神经网络对各个幼鱼的翻滚角进行检测,并对处于异常姿态的斑马鱼幼鱼进行调整,使其心脏便于监测;在获得斑马鱼幼鱼高倍放大图像之后,根据斑马鱼幼鱼心脏的特征,提出了基于像素强度跟踪的幼鱼心脏监测算法,实现了心脏定位以及心跳检测. 实验结果表明,该系统能实现对斑马鱼幼鱼心脏的准确识别并提供心跳和心率曲线,为以斑马鱼为对象的生物医学研究提供了一种新颖、稳定、高效的实验观测手段.

关键词:  机器视觉  显微操作  斑马鱼幼鱼  模式识别  深度学习

DOI:10.11918/202003106

分类号:TP271

文献标识码:A

基金项目:国家自然科学基金(61933008)



Heart recognition and monitoring method for zebrafish larvae in micromanipulation

TONG Mingsi,HUANG Gang,LEI Dongxu,ZHANG Gefei,ZHUANG Songlin,GAO Huijun

(School of Astronautics, Harbin Institute of Technology, Harbin 150001, China)

Abstract:

As a typical vertebrate model animal, zebrafish has been widely studied in the biomedical field because of its high similarity with human genes and transparent body for convenient observation. It is vital to recognize and monitor the heart of zebrafish larvae to study the pathogenesis of cardiovascular diseases and drug effects. A high-throughput heart recognition and monitoring method based on micro-vision was proposed to solve the problems of micromanipulation in the manipulation and observation of anisotropic zebrafish larvae. First, the Gaussian mixture model was used to determine the positions and directions of larvae. After one of the larvae was moved to the center of the POV of the microscope, a convolutional neural network was built to identify the roll angle of the larvae, and the larvae in abnormal postures were adjusted to make their hearts easy to monitor. After increasing magnification, a heart monitoring algorithm based on pixel intensity was proposed to realize heartbeat monitor. Experimental results show that the proposed system could realize accurate recognition and provide graphs of heartbeats and beat-rates of zebrafish larvae, which provides a novelty, stable, and efficient experimental observation method for the biomedical research of zebrafish.

Key words:  machine vision  micromanipulation  zebrafish larva  pattern recognition  deep learning


佟明斯, 黄港, 雷冬旭, 张格非, 庄松霖, 高会军. 显微操作中斑马鱼幼鱼心脏识别与监测方法[J]. 哈尔滨工业大学学报, 2020, 52(6): 182-187. DOI: 10.11918/202003106.
TONG Mingsi, HUANG Gang, LEI Dongxu, ZHANG Gefei, ZHANG Songlin, GAO Huijun. Heart recognition and monitoring method for zebrafish larvae in micromanipulation[J]. Journal of Harbin Institute of Technology, 2020, 52(6): 182-187. DOI: 10.11918/202003106.
基金项目 国家自然科学基金(61933008) 作者简介 佟明斯(1986—),男,博士,讲师;
高会军(1976—),男,教授,博士生导师 通信作者 高会军,hjgao@hit.edu.cn 文章历史 收稿日期: 2020-03-29



Abstract            Full text            Figures/Tables            PDF


显微操作中斑马鱼幼鱼心脏识别与监测方法
佟明斯, 黄港, 雷冬旭, 张格非, 庄松霖, 高会军    
哈尔滨工业大学 航天学院,哈尔滨 150001

收稿日期: 2020-03-29
基金项目: 国家自然科学基金(61933008)
作者简介: 佟明斯(1986—),男,博士,讲师; 高会军(1976—),男,教授,博士生导师
通信作者: 高会军,hjgao@hit.edu.cn


摘要: 斑马鱼作为一种典型的有脊椎模式动物,因其幼鱼具有与人类基因相似度高、身体透明方便观察等特点在生物医学领域被广泛研究.其中识别和监测斑马鱼幼鱼心脏对研究心血管疾病的发病机理、药物影响等至关重要.为解决常规显微操作技术对各向异性的斑马鱼幼鱼在操作和观测上的困难,提出了一种基于显微视觉技术的高通量斑马鱼幼鱼心脏识别和监测方法.首先通过混合高斯模型确定多斑马鱼幼鱼个体的位置和二维平面的姿态,在将其中一条斑马鱼幼鱼移动到视野中心后,基于卷积神经网络对各个幼鱼的翻滚角进行检测,并对处于异常姿态的斑马鱼幼鱼进行调整,使其心脏便于监测;在获得斑马鱼幼鱼高倍放大图像之后,根据斑马鱼幼鱼心脏的特征,提出了基于像素强度跟踪的幼鱼心脏监测算法,实现了心脏定位以及心跳检测.实验结果表明,该系统能实现对斑马鱼幼鱼心脏的准确识别并提供心跳和心率曲线,为以斑马鱼为对象的生物医学研究提供了一种新颖、稳定、高效的实验观测手段.
关键词: 机器视觉    显微操作    斑马鱼幼鱼    模式识别    深度学习    
Heart recognition and monitoring method for zebrafish larvae in micromanipulation
TONG Mingsi, HUANG Gang, LEI Dongxu, ZHANG Gefei, ZHANG Songlin, GAO Huijun    
School of Astronautics, Harbin Institute of Technology, Harbin 150001, China



Abstract: As a typical vertebrate model animal, zebrafish has been widely studied in the biomedical field because of its high similarity with human genes and transparent body for convenient observation. It is vital to recognize and monitor the heart of zebrafish larvae to study the pathogenesis of cardiovascular diseases and drug effects. A high-throughput heart recognition and monitoring method based on micro-vision was proposed to solve the problems of micromanipulation in the manipulation and observation of anisotropic zebrafish larvae. First, the Gaussian mixture model was used to determine the positions and directions of larvae. After one of the larvae was moved to the center of the POV of the microscope, a convolutional neural network was built to identify the roll angle of the larvae, and the larvae in abnormal postures were adjusted to make their hearts easy to monitor. After increasing magnification, a heart monitoring algorithm based on pixel intensity was proposed to realize heartbeat monitor. Experimental results show that the proposed system could realize accurate recognition and provide graphs of heartbeats and beat-rates of zebrafish larvae, which provides a novelty, stable, and efficient experimental observation method for the biomedical research of zebrafish.
Keywords: machine vision    micromanipulation    zebrafish larva    pattern recognition    deep learning    
斑马鱼是一种基因序列与人类具有较高的相似性的有脊椎模式动物[1],其幼鱼具有透明表皮,能够直接观察内脏器官的发育以及血液循环系统的运行情况(如图 1所示[2]),是生物医学领域的重要实验对象[3].2019年,伯尔尼大学揭示了斑马鱼幼鱼心脏组织自我再生能力的机理,引发了国际上对斑马鱼幼鱼心血管系统的广泛研究[4].对幼鱼心脏的识别与监测对于理解其发育机理[5]、药物影响[6]、组织再生[7]等过程至关重要.但是,由于斑马鱼幼鱼体长仅有3 mm左右,其内部器官细小、各异性、色素血管等的干扰,以往的人工观察手段在准确性和效率上都有很大不足.如对于幼鱼心脏观测来说,幼鱼需要处于特定姿态(如侧躺)才能够使心脏暴露在显微镜视野下方,其心脏直径约为100 μm,对于人工和常规的显微操作系统来说存在较大困难.

Fig. 1
图 1 48~72 hpf斑马鱼幼鱼形态示例 Fig. 1 Example of zebrafish larva at 48~72 hpf


针对上述问题,本文基于已搭建的斑马鱼幼鱼显微注射平台[8]开展斑马鱼幼鱼心脏识别和监测方法的研究.该方法在多条幼鱼放入平台托盘后,利用显微镜获取幼鱼在托盘中的分布图像,并基于高斯混合模型对幼鱼进行分割、定位;利用卷积神经网络对幼鱼的姿态进行识别,并通过带有吸持针的滚转机械臂将幼鱼滚转角调整至统一姿态;逐一对幼鱼进行高倍率显微观察,得到幼鱼心脏图像,并通过像素强度跟踪算法,获取并监测幼鱼心率.该方法能实现高通量的斑马鱼幼鱼心脏进行准确识别和在线检测,能够帮助生物实验人员快速获得实验数据,提高研究效率和水平.

1 系统设计本文基于图 2展示的斑马鱼幼鱼显微操作系统[9].该系统以电动体式显微镜(Nikon-SMZ25)为基础,顶部CMOS相机最大帧率为60帧/s.底座改装为带有旋转托盘和三自由度机械臂的机械平台,机械臂末端连接带有旋转功能的玻璃吸持针用于幼鱼姿态控制.该图像处理及控制软件在VS2010上采用MFC编写.

Fig. 2
图 2 斑马鱼显微操作系统 Fig. 2 Micromanipulation system for zebrafish larvae


2 斑马鱼三维姿态调整 2.1 多幼鱼分类和定位在观察实验开始,多条经MS-222(质量分数为0.003%)麻醉后的年龄范围为48~120 hpf的幼鱼被一次性放入托盘中,并使用低倍放大倍率进行图像采集.为利用高倍率物镜对每只幼鱼进行心脏监测,需要对图像中的幼鱼进行分割定位,并进行姿态调整到易于观测的位置.本文基于高斯混合模型[10],实现对多条幼鱼进行分割定位.幼鱼本身具有较为明显的身体特征,例如眼睛和鱼鳔等具有较深的颜色信息,因此利用二值化方法,可以将其从背景中分割出来,如图 3(b)所示.

Fig. 3
图 3 斑马鱼幼鱼分割定位 Fig. 3 Segmentation and location of zebrafish larvae


为了能确定每个像素点所属的斑马鱼幼鱼以及获得斑马鱼幼鱼的位置,将经二值化后的像素点看作XNn×2的数据集,使用高斯混合模型分类.对于含有K类的高斯混合模型,对每一类的参数采用EM算法进行迭代计算:

$\left\{ \begin{align} & {{\omega }_{j}}=\frac{1}{n}\sum\limits_{i=1}^{n}{{{\gamma }_{j}}({{x}_{i}}), } \\ & {{\mu }_{j}}=\frac{\sum\limits_{i=1}^{n}{{{\gamma }_{j}}({{x}_{i}}){{x}_{i}}}}{\sum\limits_{i=1}^{n}{{{\gamma }_{j}}({{x}_{i}})}}, \\ & {{\sum }_{j}}=\frac{\sum\limits_{i=1}^{n}{{{\gamma }_{j}}({{x}_{i}})({{x}_{i}}-{{\mu }_{j}}){{({{x}_{i}}-{{\mu }_{j}})}^{\text{T}}}}}{\sum\limits_{i=1}^{n}{{{\gamma }_{j}}({{x}_{i}})}}. \\ \end{align} \right.$

式中:${{\gamma }_{j}}\left( {{x}_{i}} \right)=\frac{{{\omega }_{j}}N\left( {{x}_{i}}\left| {{\mu }_{j}}, {{\sum }_{j}} \right. \right)}{\sum\limits_{k=1}^{K}{{{\omega }_{k}}N({{x}_{i}}{{\left| {{\mu }_{j}}, \sum \right.}_{k}})}}$xi的生成概率; ωjμjΣj分别为第j次迭代后的权重、均值和协方差矩阵.经计算获得每类的模型参数θk=[ωk, μk, Σk],即可计算每个像素点属于每个类别的概率,并将各个像素点划分到最大概率的类别中.因为不知道每次放入多少幼鱼,所以需要每次分类前进行确定.由于协方差矩阵Σ的特征值λ1λ2可反映数据的离散程度,本文定义其为$J=\sum\limits_{k=1}^{K}{\lambda _{1}^{k}}+\lambda _{2}^{k}.$.每次对类别数K从1开始计算不断迭代,当满足以下条件时即可确定类别数K

${{J}_{l+1}}-{{J}_{l}}>-\bar{J}, l\in {{N}_{+}}$

式中,J为由经验求出的算法终止迭代阈值.在使用该方法的时会出现将一条幼鱼的像素分为两类,以及多条幼鱼分为一类的情况,这是由于模型初始值所确定的均值μk相近,和幼鱼重叠造成的.为避免该问题,每次迭代开始前应将初值位置尽量分隔开,以及均匀摆放幼鱼使每条幼鱼相互间位置尽可能大.对于如图 3(a)所示的幼鱼,其经高斯混合模型后所得参数所绘制的曲面图如图 3(c)所示.图 3(d)显示了根据获得的均值μk确定的每幼鱼的位置.

由于幼鱼双眼和鱼鳔处颜色较深,因此能定位到该位置即能成功找到幼鱼.在稳定的光线条件下,双眼和鱼鳔处与背景对比度高,因此该方法能够准确实现幼鱼的分割及定位.

2.2 幼鱼二维姿态检测与控制对于麻醉后的斑马鱼幼鱼,其在水中的自然姿态大部分为侧躺姿态,因此心脏能够进入显微镜视野,但是也有部分幼鱼姿态会出现鱼肚朝下或朝上的异常姿态(如图 3(a)中箭头标识).为便于后续对心脏的观测,需要调整斑马鱼姿态使心脏成像清晰完整.本系统利用旋转托盘和吸持机械臂实现幼鱼姿态调整.在这一过程中,首先根据上一步确定的幼鱼位置时获得的高斯模型参数,对待观测的幼鱼,根据其高斯模型的协方差估计其当前二维姿态.

对于二维姿态的确定,由图 3(a)所知,斑马鱼身体细长,因此对于一条鱼的所有像素点组成的二维数据集DNn×2,其方差最大的方向v可定义为该幼鱼的当前姿态.类似于主成分分析法,由数据的协方差矩阵$\sum =\frac{1}{N}\sum\limits_{i=1}^{n}{\left( {{X}_{i}}-{{m}_{i}} \right)}{{\left( {{X}_{i}}-m \right)}^{T}}$,假设v为单位向量,当将数据D投影到v后,DvT的方差为

$\begin{align} & {{\sum }_{\text{pro}}}=\frac{1}{N}{{\sum\limits_{i=1}^{n}{\left( {{\left( {{x}_{i}}-{{m}_{i}} \right)}^{\text{T}}}v \right)}}^{2}}= \\ & \frac{1}{N}\sum\limits_{i=1}^{n}{{{v}^{T}}\left( {{x}_{i}}-{{m}_{i}} \right)}{{({{x}_{i}}-{{m}_{i}})}^{\text{T}}}v={{v}^{\text{T}}}\sum v \\ \end{align}$

则目标为所求方向向量v使Σpro最大.由于Σ为Hermitian矩阵,且vTv=1,则vTΣv为瑞利熵.由其性质可知,当瑞利熵取最大值时,vΣ最大特征值对应的特征向量.因此根据每个样本协方差矩阵Σk的特征向量能够获得每条斑马鱼幼鱼二维姿态vk.为了使吸持机械臂能够捕捉到幼鱼尾部,因此将所求高斯模型的协方差求取其最大特征值所对应的特征向量作为幼鱼方向,例如图 3(a)中,所得各个幼鱼的方向如图 4(d)所示.定义所得到的高斯模型的均值点与尾部端点的连线代表尾部的朝向,其与协方差求得的方向之差代表旋转的误差.经实验测试,该方法所得误差分布在±10°之间,不影响对斑马鱼尾部的吸持.

获取二维姿态后由上位机旋转托盘,转到尾部朝向旋转机械臂的位置,定位针尖位置并移动旋转机械臂,吸住斑马鱼幼鱼尾部,将幼鱼调整二维位置至视野中心,进行滚转角调整[11].

2.3 幼鱼滚转角的检测控制在吸住尾部后,需要对幼鱼的滚转角进行调整,以使心脏处于最佳观测位置.本文搭建了卷积神经网络对幼鱼当前角度进行估计,并控制滚转轴对幼鱼进行调整.

在卷积神经网络的搭建过程中,最重要的一步是样本集的设计与建立.结合系统中对滚转角判断的需要,存在两种可用的样本集标注方式,分别为直接角度标注和区域分类标注.直接角度标注是指对应每一幅样本图片,其对应的标签为视野中的幼鱼相对于某一基准的偏离角度;而区域分类标注则是指当幼鱼的滚转角处于某一有利于心脏观测的姿态时(如幼鱼侧放且心脏朝向水平向右),标记为合格样本,其余姿态为不合格样本.由于在单目视觉条件下,难以对精确角度进行测量,因此选用第2种标注方法.相比之下这种方法具有以下优点:1)由于在标注过程中姿态判断是基于人工主观标记,因此标签集中对于角度限制较为宽松,对于姿态调整降低了要求,同时简化了标签集的制作工作. 2)卷积神经网络在解决分类问题时能够对人工判断经验进行学习,使分类结果得更为稳定,因此使用判断角度范围会增加系统的鲁棒性能.使用该方法的不同姿态所对应的标签如图 4所示.

Fig. 4
图 4 不同斑马鱼幼鱼的姿态及对应标签 Fig. 4 Postures of zebrafish larvae and corresponding labels


网络搭建从浅层卷积神经网络开始,逐渐增加网络层数,通过实验结果来确定最佳的网络结构.经过测试,网络中采用3×3的卷积核时能够取得比较理想的训练效果.为了尽可能降低运算复杂程度,同时避免优化过程中的梯度爆炸与梯度消失问题,激活函数选取ReLU函数[12].在优化方法的选择上,Adam方法收敛速度相对较快,能够缩短训练时间[13].由于所选取的网络层数较深,为降低过拟合风险,网络内部加入了dropout和池化层[14].最终的预测数据通过全连接层输出,得到的结果即为幼鱼正放的概率.首先需将输入图片尺寸压缩为218×174,整个网络包含输入层、4层卷积层、3层池化层和1层全连接层,结构如图 5所示.训练集由50条处于1~5 dpf内不同年龄段的幼鱼组成.每条幼鱼以1°为步长旋转360°,当幼鱼处于人工判别为可观测心脏的角度范围内时,对应标签记为1,其余状态记为0.在训练过程中,当精度达到99%时认为算法收敛,训练停止.按照相同的方法,将另外10条幼鱼的数据作为测试集输入网络.训练过程在迭代15次后结束,测试结果准确度约为99.4%.

Fig. 5
图 5 滚转角检测的卷积神经网络结构 Fig. 5 Convolutional neural network structure of roll angle detection


在对目标幼鱼进行滚转调整时,首先使用旋转机械臂吸住幼鱼尾部旋转1周,并以1°为步长,采集360张样本图,将这些图放入训练好的模型进行样本图片的预测,记录其最佳角度的概率值,做为该张图片处在最适合注射的空间位置,控制机械臂反向旋转,使幼鱼旋转到上述所对应的空间角度,即为目标滚转角.

本文采用峰值旁瓣比(PSR)指标[15]对预测斑马鱼最佳观测姿态的卷积神经网络进行评估.对于预测斑马鱼最佳姿态,输出值的波峰出现在幼鱼心脏处于右侧时.随着幼鱼滚转,输出值逐渐减小.假设选择波峰窗口为30°,则PSR的计算方法为:幼鱼滚转1周的波峰/除去幼鱼心脏恰好处于右侧±15°后的波峰.当所得PSR越大时,代表算法越稳定.本文对多条幼鱼翻滚滚转1周进行试验,并由此计算PSR,其大小为70%,因此该算法稳定.

3 斑马鱼心率监测 3.1 幼鱼心脏定位在对幼鱼姿态进行调整后,切换显微镜放大倍率,将相机的图像采样频率设定为50帧/s,对单个幼鱼心脏进行观察.由于存在环境噪声以及幼鱼新陈代谢活动对心脏监测算法的干扰和影响,需要首先对幼鱼的心脏进行识别和定位.斑马鱼幼鱼血细胞会集中在心脏位置且在显微镜下呈红色,并且在相同成像条件下相同品系和年龄的幼鱼成像效果是近似的,因此可以将包含幼鱼的RGB图像转化到HSV空间,再提取图像中明度较高的红色区域,根据实验测试,本文取-30° < H < 30°且V>50%作为阈值.由于斑马鱼的血细胞几乎分布在身体的各个区域,因此需要对高明度红色区域进行开运算,取其中面积最大区域作为心脏位置,并建立矩形心脏观测区域(HR)作为下一步的心跳监测区域,建立过程如图 6所示.

Fig. 6
图 6 心脏区域的提取 Fig. 6 Extraction of heart region


由于心脏定位的算法根据心脏颜色特征进行识别定位,因此该方法较容易受身体部位色素覆盖了心脏的颜色特征的影响,使得所定位面积比心脏真实区域小.对此本文是根据所求得的心脏区域的重心作为一个矩形中心,在矩形中进一步进行心率识别.虽然该方法会引入部分噪声,但对后续影响较小.

3.2 斑马鱼幼鱼心率监测在定位到心脏区域后,通过如下的像素强度跟踪算法来实现心率的检测.其以图像差分为基本方法.但是由于水流等因素的影响,幼鱼整体可能存在缓慢的漂移,这会导致在差分图像中始终存在噪声,为接下来的心跳检测带来了不确定性.为了抑制噪声,首先对原始图像中的心脏区域进行高斯滤波.但是常规的相邻帧差分方法以及相对固定帧差分均无法较好地反映检测心脏的运动变化,因此本文将上一步中得到的HR区域灰度化并取每个像素在超过一个心跳周期的时间中取到的最大值,以此作为差分法的参考图像.得到的心脏区域内一个心跳周期内的强度变化如图 7所示.

Fig. 7
图 7 一个心跳周期内心脏区域像素强度变化 Fig. 7 Changes of pixel intensity of heart region in a heartbeat cycle


从图 7中可以观察到,心脏区域内强度变化的重心位置随着血液在心室心房中的流动而变化,因此可通过跟踪像素强度变化的重心位置实现对心跳的监测,其计算方式如下:

$G=\left( {{x}^{\text{C}}}, {{y}^{\text{C}}} \right)=\left( \frac{{{M}_{10}}}{{{M}_{00}}}, \frac{{{M}_{01}}}{{{M}_{00}}} \right).$

式中:G为重心位置; (xC, yC)为重心坐标; ${{M}_{00}}=\sum\limits_{(x,y)\in \text{HR}}{I(x,y)}$为HR内的零阶矩; ${{M}_{10}}=\sum\limits_{(x,y)\in \text{HR}}{xI(x,y)}$${{M}_{01}}=\sum\limits_{(x,y)\in \text{HR}}{yI(x,y)}$分别为HR内的一阶矩; I(x, y)为(x, y)处的强度变化.

为了将重心在二维图像上的变化转化为单一指标来描述心跳,将重心位置坐标(x, y)向其方差最大的方向(a, b)投影,即$P=\frac{ax+by}{\sqrt{{{a}^{2}}+{{b}^{2}}}} $.P的位置变化可以用来检测心跳的发生.若条件满足${{P}_{i-1}}\le \frac{{{P}_{\max }}+{{P}_{\min }}}{2}$${{P}_{i}}>\frac{{{P}_{\max }}+{{P}_{\min }}}{2}$,其中Pi为第i帧图像计算得到的P值,PmaxPmin分别为超过一个心跳周期时间中P所取到的最大值与最小值,则判断第i帧的时刻发生了一次心跳.

图 8(a)为采用上述像素强度跟踪方法对3条不同幼鱼进行的心跳监测结果.图中曲线由心脏的重心随时间而发生的位移构成.通过人工逐帧对幼鱼心脏血液变化进行判断,并与算法结果进行比较,两者差距一般在20 μm内,能够反映心脏的跳动规律,其波动曲线能够帮助对幼鱼生理状态进行研究.图中红色星号为心率周期标记,可以得到3条幼鱼的心率曲线,如图 8(b)所示,可以看出每条幼鱼自身的心率变化都围绕着150次/min变化,与文献[16]中的研究结果相吻合.

Fig. 8
图 8 不同幼鱼在一段时间内的心脏监测 Fig. 8 Heart rate detection of zebrafish larvae in a period of time


4 结论1) 本文基于高斯混合模型确定多条斑马鱼幼鱼的二维姿态和在视野中的位置,基于卷积神经网络确定幼鱼翻滚角,以此实现了幼鱼的位姿检测和调整控制.

2) 根据斑马鱼幼鱼心脏的特点,提出了一种基于像素强度跟踪的周期性运动目标识别方法,能够定位心脏区域,并实现心跳曲线的高效监测.

3) 本文基于显微视觉实现了高通量的斑马鱼幼鱼心脏识别和监测方法,该方法无需植入电极或注射荧光物质,能够保证幼鱼在最小损伤及改造的条件下监测幼鱼状态.为有脊椎动物的遗传、发育、组织重生的研究提供了一种新颖的高通量手段,同时也为提高心脏类药物的研发和测试效率提供参考.


参考文献
[1] HOWE K, CLARK M D, TORROJA C F, et al. The zebrafish reference genome sequence and its relationship to the human genome[J]. Nature, 2013, 496(7446): 498. DOI:10.1038/nature12111


[2] GRAHAM K. Biology development[EB/OL]. [2020-03-01].https://msu.edu/~bentle48/Katie%20Graham.html.


[3] COSENTINO C C, ROMAN B L, DRUMMOND I A, et al. Intravenous microinjections of zebrafish larvae to study acute kidney injury[J]. Journal of Visualized Experiments, 2010, 12(42): e2079. DOI:10.3791/2079(2010)


[4] SANDE M, MARCOS M, INES G, et al. Adult sox10+ cardiomyocytes contribute to myocardial regeneration in the zebrafish[J]. Cell Reports, 2019, 29(4): 1041. DOI:10.1016/j.celrep.2019.09.041


[5] KAWAHARA A, NISHI T, HISANO Y, et al. The sphingolipid transporter Spns2 functions in migration of zebrafish myocardial precursors[J]. Science, 2009, 323(5913): 524. DOI:10.1126/science.1167449


[6] ZHU Xiaoyu, LIU Hongcui, GUO Shengya, et al. A zebrafish thrombosis model for assessing antithrombotic drugs[J]. Zebrafish, 2016, 13(4): 335. DOI:10.1089/zeb.2016.1263


[7] D'AMICO L, SCOTT I C, JUNGBLUT B, et al. A mutation in zebrafish hmgcr1b reveals a role for isoprenoids in vertebrate heart-tube formation[J]. Current Biology, 2007, 17(3): 252. DOI:10.1016/j.cub.2006.12.023


[8] 庄松霖.面向斑马鱼幼鱼的显微操作系统关键技术研究[D].哈尔滨: 哈尔滨工业大学, 2019
ZHUANG Songlin. Research on key technologies of zebrafish larva micromanipulation system[D]. Harbin: Harbin Institute of Technology, 2019


[9] ZHUANG Songlin, LIN Weiyang, ZHONG Jie, et al. Visual servoed three-dimensional rotation control in zebrafish larva heart microinjection system[J]. IEEE Transactions on Biomedical Engineering, 2018, 65(1): 64. DOI:10.1109/TBME.2017.2688375


[10] 周志华. 机器学习[M]. 北京: 清华大学出版社, 2016: 162.
ZHOU Zhihua. Machine learning[M]. Beijing: Tsinghua University Press, 2016: 162.


[11] ZHUANG Songlin, LIN Weiyang, GAO Huijun, et al. Visual servoed zebrafish larva heart microinjection system[J]. IEEE Transactions on Industrial Electronics, 2017, 64(5): 3727. DOI:10.1109/TIE.2017.2652380


[12] HAHNLOSER R H R, SARPESHKAR R, MAHOWALD M A, et al. Digital selection and analogue amplification coexist in a cortex-inspired silicon circuit[J]. Nature, 2000, 405(6789): 947. DOI:10.1038/35016072


[13] KHAN S H, RAHMANI H, SHAH S A A, et al. A guide to convolutional neural networks for computer vision[J]. Synthesis Lectures on Computer Vision, 2018, 8(1): 1. DOI:10.2200/S00822ED1V01Y201712COV015


[14] LECUN Y, BENGIO Y, HINTON G. Deep learning[J]. Nature, 2015, 521(7553): 436. DOI:10.1038/nature14539


[15] JUNG C H, KWAG Y K. PSLR estimation considering clutter background from SAR image data[C]//Proceedings of the IEEE International Geoscience & Remote Sensing Symposium. Piscataway, NJ: IEEE Press, 2009: 627. DOI: 10.1109/IGARSS.2009.5417447


[16] KRISHNA S, CHATTI K, GALIGEKERE R R. Automatic and robust estimation of heart rate in zebrafish larvae[J]. IEEE Transactions on Automation Science & Engineering, 2018, 15(3): 1041. DOI:10.1109/TASE.2017.2705240



相关话题/技术 观测

  • 领限时大额优惠券,享本站正版考研考试资料!
    大额优惠券
    优惠券领取后72小时内有效,10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材,产品类型包含电子书、题库、全套资料以及视频,无论您是考研复习、考证刷题,还是考前冲刺等,不同类型的产品可满足您学习上的不同需求。 ...
    本站小编 Free壹佰分学习网 2022-09-19
  • 基于声发射技术的单丝复合材料界面性能研究
    基于声发射技术的单丝复合材料界面性能研究隋晓东1,吴凯文2,李烨2,李珂1,肇研2(1.沈阳飞机设计研究所结构部,沈阳110035;2.北京航空航天大学材料科学与工程学院,北京100191)摘要:为了克服传统单丝断裂实验局限于透明及高应变树脂的缺点,进一步拓展其应用范围,将声发射技术与传统单丝断裂实 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • 薄板焊接变形中频感应矫正技术
    薄板焊接变形中频感应矫正技术刘海华,白云龙,李亮玉,陈豪杰,王力斌(天津市现代机电装备技术重点实验室(天津工业大学),天津300387)[HJ1.8mm]摘要:目前针对船舶上层建筑中的薄板焊接变形矫正主要采用火焰矫正法,但此种方法效率低、操作安全性差,且难以实现自动化.为了更好地实现薄钢板焊接变形感 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • 汽车轻量化技术的研究现状综述
    汽车轻量化技术的研究现状综述李光霁,刘新玲(上海应用技术大学机械工程学院,上海201418)摘要:近年来汽车行业的科技水平发展程度逐渐提高,汽车行业进入高速发展阶段,然而随之而来的环境和能源问题也日趋加重。轻量化技术变成了各个汽车企业提升市场竞争力的关键,作者根据近些年来汽车轻量化技术现状进行综述, ...
    本站小编 哈尔滨工业大学 2020-12-05
  • DNA存储中的编码技术
    DNA存储中的编码技术毕昆,顾万君,陆祖宏(生物电子学国家重点实验室(东南大学,生物科学与医学工程学院),南京210096)摘要:脱氧核糖核酸(DeoxyribonucleicAcid,DNA)是一种天然的信息存储介质,具有存储密度高、存储时间长、损耗率低等特点。在传统存储方式不能满足信息增长的需求 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • 文本分析技术在蛋白质生物信息学中应用的案例综述
    文本分析技术在蛋白质生物信息学中应用的案例综述苏绍玉1,徐婧2,鄢仁祥2(1.福建省科学技术信息研究所,福州350003;2.福州大学生物科学与工程学院,福州350100)摘要:海量数据时代考察文本分析技术在生物信息学领域的应用具有重要的理论和现实价值。本文讨论了文本分析在蛋白质计算分析中的几个应用 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • GNSS接收机导航滤波器辅助捕获技术
    GNSS接收机导航滤波器辅助捕获技术赵琳,罗治斌,丁继成,吴谋炎(哈尔滨工程大学自动化学院,哈尔滨150001)摘要:为了充分利用GNSS接收机导航滤波器先验信息对基带信号处理过程的捕获进行辅助,以提高捕获速度及灵敏度,以北斗B1I信号为研究对象,开展GNSS接收机导航滤波器辅助估计伪码相位、载波多 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • SVD可观测度分析方法的改进及组合导航中的应用
    SVD可观测度分析方法的改进及组合导航中的应用周广涛1,邵剑波1,2,韩少卫1,陈海南1(1.哈尔滨工程大学自动化学院,哈尔滨150001;2.哈尔滨工业大学仪器科学与工程学院,哈尔滨150001)摘要:为解决已有的基于线性时变系统可观测性矩阵奇异值分解(SVD)的可观测度分析方法中存在的依靠外部量 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • 金属增材制造缺陷检测技术
    金属增材制造缺陷检测技术郭政亚,熊振华(上海交通大学机械与动力工程学院,上海200240)摘要:金属增材制造过程中材料温度变化剧烈、行为复杂,特殊的工艺特点使零件中不可避免地出现各类缺陷,包括表面及内部缺陷,严重危害零件性能,成为阻碍金属增材制造技术发展的重要因素,限制了该技术在关键领域的应用.及时 ...
    本站小编 哈尔滨工业大学 2020-12-05
  • 可调磁通电机系统及其关键技术发展
    可调磁通电机系统及其关键技术发展郑萍,王明峤,乔光远,刘法亮,张书宽(哈尔滨工业大学电气工程及自动化学院,哈尔滨150080)摘要:针对传统汽车工业发展面临的能源危机和环境污染等问题,为满足新能源汽车驱动电机在宽调速范围内高效率运行的需求,对可调磁通电机(variable-fluxmachine,V ...
    本站小编 哈尔滨工业大学 2020-12-05
  • 高精度小型陀螺仪关键器件加工技术研究进展
    高精度小型陀螺仪关键器件加工技术研究进展陈明君,王廷章,刘赫男,吴春亚,程健,苏定宁(哈尔滨工业大学精密工程研究所,哈尔滨150001)摘要:主要介绍超流体陀螺仪、原子陀螺仪和微半球陀螺仪3种陀螺仪关键器件的结构特点、质量技术指标和制备技术要求,阐述高精度微小型陀螺仪核心器件的制备技术研究进展;详细 ...
    本站小编 哈尔滨工业大学 2020-12-05