[논문 리뷰] SAXSDOG: open software for real-time azimuthal integration of 2D scattering images

Max Burian, Christian Meisenbichler외 2명|arXiv (Cornell University)|2020. 07. 04.

NMR spectroscopy and applications인용 수 6

한 줄 요약

SAXSDOG는 소속기지에서 2D 소각 및 광각 X선 회절(SAXS/WAXS) 영상의 실시간 축방향 적분을 위한 오픈소스, 파이썬 기반 소프트웨어 프레임워크이다. 자동화된 서버 기반 파이프라인을 통해 대면적 검출기 데이터를 밀리초 수준으로 처리하며, SAXSLEASH GUI를 통한 실시간 시각화 및 분류를 제공한다. 또한 실험실 사용을 위한 독립형 '반환용' 버전을 포함하고 있다.

ABSTRACT

In-situ small- and wide-angle scattering experiments at synchrotrons often result in massive amounts of data within seconds only. Especially during such beamtimes, processing of the acquired data online, so without mentionable delay, is key to obtain feedback on failure or success of the experiment. We thus developed SAXSDOG, a python based environment for real-time azimuthal integration of large-area scattering-images. The software is primarily designed for dedicated data-pipelines: once a scattering image is transferred from the detector onto the storage-unit, it is automatically integrated and pre-evaluated using integral parameters within milliseconds. The control and configuration of the underlying server-based processes is done via a graphical user interface SAXSLEASH, which visualizes the resulting 1D data together with integral classifiers in real time. SAXSDOG further includes a portable 'take-home' version for users that runs on standalone computers, enabling its use in labs or at the preferred workspace.

연구 동기 및 목표

• 소속기지에서 실시간으로 생성되는 막대한 2D X선 회절 데이터의 처리 과제를 해결한다.
• 실험 성공 또는 실패에 대한 즉각적인 피드백을 제공하기 위해 온라인, 저지연 처리를 가능하게 한다.
• 확장 가능한 서버 기반 파이프라인을 개발하여 대면적 검출기 영상의 자동 축방향 적분 및 사전 평가를 실현한다.
• 비소속기지 인프라가 없는 실험실 또는 개인 작업환경에서 사용 가능한 독립형, 이식 가능한 버전을 제공한다.
• 그래픽 사용자 인터페이스(SAXSLEASH)를 통한 1D 회절 프로파일의 실시간 시각화 및 분류를 통합한다.

제안 방법

• 이미지가 저장소에 전송되자마자 처리할 수 있도록 파이썬 기반 백엔드를 활용한다.
• 2D 검출기 영상을 밀리초 내에 1D 회절 프로파일로 변환하기 위해 축방향 적분을 적용한다.
• 총 강도, 회전반경 등 통합 매개변수를 사용해 데이터 품질의 실시간 사전 평가를 수행한다.
• 이미지 도착 즉시 자동으로 적분을 트리거하는 서버 기반 프로세스를 실행하여 처리 지연을 최소화한다.
• SAXSLEASH GUI를 통해 결과 1D 데이터와 분류기 정보를 실시간으로 시각화하여 실시간 모니터링을 가능하게 한다.
• 독립형 '반환용' 버전을 포함하여 스테이션 컴퓨터에서 실행 가능하게 하여 현장 외 또는 실험실 기반 분석을 지원한다.

실험 결과

연구 질문

• RQ1 고성능 소속기지 비트라임에서 2D X선 회절 데이터를 최소한의 지연으로 실시간 처리할 수 있는 방법은 무엇인가?
• RQ2 신뢰성 있고 자동화되며 저지연인 대면적 검출기 영상의 축방향 적분을 가능하게 하는 소프트웨어 아키텍처는 무엇인가?
• RQ3 통합 분류기(예: 총 강도, 회전반경)를 활용해 비트라임 중 실험자에게 데이터 품질에 대한 실시간 피드백을 제공할 수 있는 방법은 무엇인가?
• RQ4 고성능 데이터 처리 파이프라인을 소속기지에서 분리하여 독립형 시스템에 배포할 수 있는 정도는 어느 정도인가?
• RQ5 GUI 기반 모니터링 시스템(SAXSLEASH)의 성능 및 사용성은 1D 회절 프로파일의 실시간 시각화에 대해 어떠한가?

주요 결과

• SAXSDOG는 저장소에 전송된 후 2D 회절 영상의 밀리초 수준 처리를 달성하여 비트라임 중 실시간 피드백을 가능하게 한다.
• 소프트웨어는 최소한의 지연으로 2D 영상을 1D 회절 프로파일로 성공적으로 통합하여 즉각적인 실험 결정을 지원한다.
• SAXSLEASH GUI는 1D 데이터와 통합 분류기의 실시간 시각화를 제공하여 실험 감시를 향상시킨다.
• 독립형 '반환용' 버전은 실험실 및 개인 작업환경에서의 배포를 가능하게 하여 소속기지 외 환경에서도 활용 가능성을 넓힌다.
• 시스템은 전용 데이터 파이프라인에 통합되어 수동 조작 없이도 견고하고 자동화된 처리를 보장하도록 설계되어 있다.
• 소스 코드는 공개되어 있어 투명성, 재현성 및 커뮤니티 기반의 프레임워크 확장성을 지원한다.