[论文解读] A Mosquito Pick-and-Place System for PfSPZ-based Malaria Vaccine Production

Henry Phalen, Prasad Vagdargi+9 more|arXiv (Cornell University)|Apr 12, 2020

Mosquito-borne diseases and control参考文献 17被引用 8

一句话总结

本文提出了一种基于视觉引导的机器人抓取与放置系统，用于自动化疟疾疫苗生产中关键的按蚊解剖步骤。该系统采用4自由度机器人配合定制微型夹具，并结合实时计算机视觉技术，实现了100%的抓取准确率和90%的定位准确率，成功完成按蚊头部去除的精准定位，展示了实现规模化、自动化疫苗制造以支持全球根除努力的可行路径。

ABSTRACT

The treatment of malaria is a global health challenge that stands to benefit from the widespread introduction of a vaccine for the disease. A method has been developed to create a live organism vaccine using the sporozoites (SPZ) of the parasite Plasmodium falciparum (Pf), which are concentrated in the salivary glands of infected mosquitoes. Current manual dissection methods to obtain these PfSPZ are not optimally efficient for large-scale vaccine production. We propose an improved dissection procedure and a mechanical fixture that increases the rate of mosquito dissection and helps to deskill this stage of the production process. We further demonstrate the automation of a key step in this production process, the picking and placing of mosquitoes from a staging apparatus into a dissection assembly. This unit test of a robotic mosquito pick-and-place system is performed using a custom-designed micro-gripper attached to a four degree of freedom (4-DOF) robot under the guidance of a computer vision system. Mosquitoes are autonomously grasped and pulled to a pair of notched dissection blades to remove the head of the mosquito, allowing access to the salivary glands. Placement into these blades is adapted based on output from computer vision to accommodate for the unique anatomy and orientation of each grasped mosquito. In this pilot test of the system on 50 mosquitoes, we demonstrate a 100% grasping accuracy and a 90% accuracy in placing the mosquito with its neck within the blade notches such that the head can be removed. This is a promising result for this difficult and non-standard pick-and-place task.

研究动机与目标

• 为解决因人工按蚊解剖速度缓慢而导致的PfSPZ基疟疾疫苗大规模生产瓶颈。
• 减少技术人员培训时间，提高唾液腺提取的吞吐量。
• 开发一种能够以高精度处理小型、易变形、非均匀生物样本（如按蚊）的机器人系统。
• 证明在生物制造中自动化复杂且非标准的抓取与放置任务的可行性。

提出的方法

• 由4自由度机械臂驱动的定制微型夹具，用于抓取并定位活体按蚊。
• 计算机视觉系统处理来自俯视摄像头的实时图像，以检测按蚊的朝向、尺寸及头部位置。
• 机器人根据视觉反馈调整运动，使按蚊颈部与带凹槽的解剖刀精确对齐。
• 系统采用模块化工作流程，机器人可将按蚊从暂存托盘精确转移至解剖夹具中。
• 视觉系统估算探针尖端与头部之间的偏移量，以提高放置准确率并减少插入过程中的翻转。
• 系统在50只按蚊上进行了测试，实时图像处理在GPU上实现每帧0.16秒的处理速度。

实验结果

研究问题

• RQ1 基于视觉引导的机器人系统能否实现对活体、非均匀按蚊的可靠抓取与精确放置，以实现解剖？
• RQ2 自动化在多大程度上可减轻人工按蚊解剖的培训负担并提升疫苗生产中的吞吐量？
• RQ3 实时计算机视觉如何在机器人操作过程中适应活体按蚊的解剖变异性和形变？
• RQ4 机器人按蚊放置过程中的主要故障模式是什么？如何通过视觉反馈与机械设计进行缓解？
• RQ5 模块化机器人系统能否集成到更大规模的自动化流程中，实现PfSPZ疫苗生产的端到端自动化？

主要发现

• 在50次测试试验中，该机器人系统实现了100%的抓取准确率，证明了对活体按蚊的可靠操控能力。
• 系统在将按蚊颈部精确对准带凹槽解剖刀方面实现了90%的准确率，有效支持头部去除。
• 平均每只按蚊的周期时间为7.33秒，通过运动优化有望将吞吐量提升至约每小时700只。
• 放置过程中发生翻转的主要原因包括对准不准或头部/身体与刀片边缘发生接触，尤其在颈部未正确居中时更为明显。
• 基于视觉的反馈实现了对解剖变异性的实时适应，但探针尖端与头部之间偏移量的几何估计仍是亟待改进的关键领域。
• 系统的成功表明，对手动流程的优化（如3MDF方法）对于开发复杂生物制造工作流中的鲁棒自动化至关重要。