基因毒性试验是用来评估化学制剂(如药物)对遗传物质(DNA和RNA)的损害，并经常用于测试候选药物的安全性。在过去，训练有素的实验室技术人员手工进行分析，使用显微镜检查数千个单个细胞，以确定DNA损伤的生物标志物:细胞分裂时微核(MN)的形成(图1)。除了劳动密集型和耗时外，这种方法还依赖于每个技术人员的主观判断。
图1所示。左上角:单核细胞;右上:单核微核细胞。左下:双核细胞;右下:带有微核的双核细胞。左:亮场图像;右图:核荧光图像。
我在斯旺西大学的研究小组已经开发了一种基于深度学习和成像流式细胞术(IFC)的遗传毒性和类似研究的自动化方法。我的合作者George Johnson博士的实验室使用IFC从单个细胞收集多通道图像数据。我们使用深度学习网络DeepFlow，这是一个针对IFC[1]进行优化的网络，它使我们能够准确和自动地将图像分类为单核、单核含MN、双核或双核含MN(图2)。
图2.自动图像分类工作流程。
这种方法消除了手工方法的主观性，使测定结果在世界各地的实验室中保持一致。因为我们在MATLAB中实现了DeepFlow®使用深度学习工具箱™，我们可以将代码发送到我们与之合作的任何实验室，并且知道它将可靠地运行。许多研究人员已经熟悉MATLAB，这意味着它们可以轻松修改或改进代码和量身裁缝深流向其特定的实验设置。
建筑DeepFlow
我们最初使用Keras TensorFlow™实现DeepFlow，但决定在MATLAB中重新实现它，以便DeepFlow可以在世界上几乎任何实验室中使用。我们希望我们的软件无论在一个特定的实验室使用什么流式细胞仪都能工作。我们不想担心依赖关系，我们想要一个易于理解和修改的深度学习网络。
我们没有对Keras代码进行逐行翻译，而是使用Deep Network Designer应用程序构建、可视化并训练DeepFlow网络。Keras代码在屏幕的一边，Deep Network Designer应用程序在另一边，我们简单地复制了初始实现的架构(图3)。
图3.深度网络设计器应用程序中的深流网络。
我们使用深度学习工具箱中的网络分析仪来检查网络及其层中的错误(图4)。例如，我们从一个为200x200像素的图像设计的网络开始，并将其缩小，以与我们从IFC获得的64x64像素的图像一起工作，利用网络分析仪对网络中每个卷积层的图像大小进行验证。我们的合作者在使用Deep network Designer应用程序对网络进行更改时也会使用网络分析仪。
图4. Matlab网络分析仪应用中的Deepflow网络。
在基因毒性测定中使用深流量
在我们的实验设置中，我们使用的IFC能够在几分钟内处理10,000个细胞。我们用溶液对细胞核和微核进行染色，从而使DNA更清晰可见，并捕捉到亮场图像和荧光图像(图5)。
图5。用于国际金融公司数据的分类和可视化。［1］
我们将IFC数据带到MATLAB中作为MATLAB数据存储。我们利用传统的图像处理技术预处理，以基于其强度来重整每个图像，并确保每个图像在框架中完全焦点。我们使用边缘检测，例如，识别清洁边缘，其指示图像处于焦点，并且完全平坦的边缘，这表明相机没有捕获整个小区。
我们训练DeepFlow CNN使用2000多张人工分类的图像。一旦我们从IFC得到一组标准化的、干净的数据，我们就使用训练过的网络将图像分类为有单核、双核、三核或四核细胞(含或不含MN)的图像。最后，使用一个确定的公式来计算每一类细胞的百分比，我们可以评估用于处理细胞的药剂的毒性。
我们发现，深流网络中最终分类层上方的层对了解训练的CNN是如何工作的，特别值得注意。要解析嵌入在此图层中的信息，我们使用MATLAB应用at-分布式随机邻居嵌入(tSNE)算法，用于可视化高维数据(图6)。这些可视化可以揭示图像数据中的细微差别，这些细微差别在人工检查中几乎无法察觉。例如，双核和单核细胞与微核的关系表明，大小决定了正常细胞核和微核的区别。
图6.显示来自遗传毒性测定的典型细胞类型的数据的TSNE可视化。
利用弱监督学习将深流原则扩展到血液质量评估
除了基因毒性研究，我们还在各种分析和分类应用中使用了深度学习。例如，最近，我和我的同事使用CNN和弱监督学习来研究红细胞(rbc)随时间[2]的降解。输血储存血液中的红细胞出现储存损伤，观察到细胞形态的变化，这通常是用显微镜手工评估的。手工评估非常耗时，我们注意到不同的专家通常会得出不同的分数。
对于RBC研究的第一部分，我们随着遗传毒性研究进行，培训具有手动标记为属于几种可能的形态之一的图像的CNN，或表型(图7)。经过训练的网络在形态分类方面与专家达成了超过76%的一致，这与专家之间大约79%的一致相当。
图7。红细胞形态。
对于该研究的第二部分，我们消除了主观人类标签，并培训了弱监督的神经网络，Reset50，只使用血液在储存中的时间量。当我们通过基于遗传毒性研究中使用的基于TSNE的技术可视化结果时，我们发现网络已经学会了提取了单细胞功能，揭示了形态学变化的年代学进展（图8）。我们意识到这种进展可用于预测血液质量和储存血液的到期日，没有人类愈合的注释，减少血液浪费并帮助确保不适用于输血中的血液。
图8.在CNN可视化期间显示的表型（形态）的分布。
DeepFlow计划
我们的小组目前正在评估几个潜在的研究项目，将IFC与Matlab联合起来。一个项目在基因毒性研究上建立，但侧重于评估经过化疗的患者中白细胞的响应[3]。第二个将扩展Deepflow以滑动扫描分析，这可能使公司能够重新分析大量幻灯片扫描数据。我们还在开发深流的图形界面，我们将通过网络包装为单个独立应用程序。
