[论文解读] A Missing and Found Recognition System for Hajj and Umrah

Salah A. Aly|arXiv (Cornell University)|Aug 27, 2012

Education and Islamic Studies参考文献 3被引用 5

一句话总结

本文提出了一种基于众包感知（CrowdSensing）的识别系统，结合面部识别与物体识别，以应对在麦加和麦地那进行朝觐（Hajj）和副朝（Umrah）期间失踪人员与遗失物品的问题。该系统利用配备Android系统的移动设备、触摸屏自助终端机以及配备朝觐者数据库的集中式服务器，通过基于轮廓的面部检测与图像搜索技术，实现实时检测与匹配失踪人员及发现的物品，借助网络门户框架实现即时在线访问与警报，该系统已在2011年朝觐季节完成测试。

ABSTRACT

This note describes an integrated recognition system for identifying missing and found objects as well as missing, dead, and found people during Hajj and Umrah seasons in the two Holy cities of Makkah and Madina in the Kingdom of Saudi Arabia. It is assumed that the total estimated number of pilgrims will reach 20 millions during the next decade. The ultimate goal of this system is to integrate facial recognition and object identification solutions into the Hajj and Umrah rituals. The missing and found computerized system is part of the CrowdSensing system for Hajj and Umrah crowd estimation, management and safety.

研究动机与目标

• 为应对因大规模朝觐人群导致的失踪人员与遗失物品日益严峻的挑战，预计每年朝觐人数将达到2000万人次。
• 开发一种可扩展的实时系统，利用面部识别与集中式朝觐者图像数据库，识别失踪、死亡及发现的人员。
• 创建网络门户与移动应用程序，用于报告与查找遗失物品及失踪人员，确保通过个人电脑或移动设备实现即时访问。
• 将系统整合进更广泛的众包感知（CrowdSensing）框架中，以实现对两大圣城人群数量估算、安全保障与应急响应。
• 通过利用入口点图像中的面部识别技术，支持边境管控与移民监控。

提出的方法

• 采用基于轮廓的面部检测算法，聚焦于一般面部轮廓而非三维面部几何结构，从而在光照与表情多变条件下提升鲁棒性。
• 利用集中式服务器处理来自移动设备或自助终端机的面部识别查询，将捕捉到的图像与朝觐者照片数据库进行比对。
• 部署网络门户与Android应用程序，允许用户通过个人电脑或触摸屏自助终端机提交发现物品的图像与描述，或报告失踪人员。
• 依赖大规模数据集（HUDA），其中每位朝觐者至少包含三张图像，拍摄于不同姿势、表情、光照与背景条件下，以全彩色JPG格式存储。
• 在高流量区域（大清真寺、机场、医院）部署先进监控摄像头，实时捕捉图像，用于自动面部检测与识别。
• 采用智能警报系统，在紧急情况下（如失踪人员或身份不明遗体）通知相关部门，实现快速响应。

实验结果

研究问题

• RQ1 如何在麦加与麦地那的圣寺等高密度、多样化且动态的环境中有效应用面部识别技术？
• RQ2 在真实朝觐条件下，基于轮廓的面部检测方法中，计算复杂性与识别准确率之间应如何实现最优平衡？
• RQ3 如何通过共享基础设施与数据模型，使统一系统高效管理失踪人员与遗失物品？
• RQ4 网络门户与移动应用程序系统在多大程度上可缩短响应时间并提高失踪人员与遗失物品的找回率？
• RQ5 可扩展的实时识别系统能否成功集成至宗教朝觐场景下的现有人群管理与安全框架中？

主要发现

• 该系统已在2011年朝觐季节成功原型化并完成测试，证明了其在真实环境下的可行性。
• HUDA数据集（每位朝觐者至少三张图像，涵盖不同条件）支持在现实环境变化下实现稳健的面部识别。
• 基于轮廓的检测方法在无需复杂三维面部建模的情况下，即可实现可接受的识别准确率，显著提升系统效率。
• 通过移动设备与自助终端机输入数据，可实现实时识别失踪人员与发现的物品，结果可在数秒内在线访问。
• 将面部识别与物体追踪及集中式数据库相结合，可实现即时警报与快速响应，显著提升安全水平与寻回成效。
• 该系统既支持紧急响应，也支持长期数据收集，相关信息可通过网络或移动平台全年无间断访问。