[논문 리뷰] QFL: Data-Driven Feedback Loop to Manage Quality in Agile Development

Lidia López, Alessandra Bagnato외 2명|arXiv (Cornell University)|2021. 01. 01.

Software Engineering Research참고 문헌 12인용 수 6

한 줄 요약

이 논문은 품질 요구사항(QRs)을 종단 간(end-to-end)으로 관리하기 위해 Q-Rapids 소프트웨어 분석 도구를 애자일 개발에 통합한 데이터 기반 프로세스인 품질 피드백 루프(QFL)를 제안한다. SonarQube와 JIRA와 같은 도구에서 유도된 제품 품질 메트릭스를 OpenProject의 프로젝트 관리와 연동함으로써 QFL은 반자동 QR 생성, 관리자 제어 우선순위 설정, 지속적인 모니터링을 가능하게 하여 제안된 QR의 57%가 루트맵에 포함되는 데 성공했다.

ABSTRACT

Background: Quality requirements (QRs) describe desired system qualities, playing an important role in the success of software projects. In the context of agile software development (ASD), where the main objective is the fast delivery of functionalities, QRs are often ill-defined and not well addressed during the development process. Software analytics tools help to control quality though the measurement of quality-related software aspects to support decision-makers in the process of QR management. Aim: The goal of this research is to explore the benefits of integrating a concrete software analytics tool, Q-Rapids Tool, to assess software quality and support QR management processes. Method: In the context of a technology transfer project, the Softeam company has integrated Q-Rapids Tool in their development process. We conducted a series of workshops involving Softeam members working in the Modelio product development. Results: We present the Quality Feedback Loop (QFL) process to be integrated in software development processes to control the complete QR life-cycle, from elicitation to validation. As a result of the implementation of QFL in Softeam, Modelio's team members highlight the benefits of integrating a data analytics tool with their project planning tool and the fact that project managers can control the whole process making the final decisions. Conclusions: Practitioners can benefit from the integration of software analytics tools as part of their software development toolchain to control software quality. The implementation of QFL promotes quality in the organization and the integration of software analytics and project planning tools also improves the communication between teams.

연구 동기 및 목표

• 기능적 제공이 비기능적 품질 요구사항보다 우선시되는 애자일 소프트웨어 개발(ASD) 환경에서 품질 요구사항(QRs)이 모호하고 잘 관리되지 않는 문제를 해결한다.
• 소프트웨어 분석 도구가 실제 애자일 환경에서 지속적인 품질 평가 및 QR 관리를 어떻게 지원할 수 있는지 탐색한다.
• 개발 도구에서 유도된 품질 데이터를 프로젝트 계획에 통합하여 품질 모니터링과 실행 가능한 의사결정 사이의 격차를 해소하는 피드백 루프를 개발하고 평가한다.
• 도구 통합된 QR 관리를 통해 품질 엔지니어, 프로젝트 매니저, 개발 팀 간의 소통과 의사결정을 향상시킨다.

제안 방법

• Q-Rapids에서 3단계 품질 모델을 활용한다: 품질 메트릭스(예: 주석 비율, 순환 복잡도) → 품질 요소(예: 코드 품질, 심각한 이슈) → 전략적 지표(예: 제품 품질, 프로세스 성과).
• SonarQube, JIRA, Jenkins, SVN, OpenProject, Modelio 로그와 같은 이질적인 데이터 소스를 Q-Rapids에 통합하여 지속적인 품질 평가 및 대시보드 기반 시각화를 구현한다.
• Q-Rapids의 qr-dashboard 및 qr-alert 컴포넌트를 활용해 반자동 QR 생성 프로세스를 구현하며, 품질 이상이 정의된 패턴에 따라 후보 QR을 트리거한다.
• qr-issuetracker-openproject 플러그인을 사용해 제안된 QR을 OpenProject로 내보내며, 프로젝트 매니저가 근거를 제시해 수락 또는 거부를 결정한다.
• QR 구현 진행 상황을 추적하고 프로세스의 효과성을 검증하기 위해 '품질 피드백 루프' 전략적 지표를 정의하고 모니터링한다.
• Softeam의 Modelio 팀과 워크숍을 진행하여 QFL의 사용성, 통합성, 품질 관행 및 팀 간 소통에 미치는 영향을 평가한다.

실험 결과

연구 질문

• RQ1 RQ1: QFL 프로세스는 애자일 개발 프로세스에 성공적으로 통합되어 품질 요구사항 관리의 전 생애주기(전체 라이프사이클)를 지원할 수 있는가?
• RQ2 RQ2: Q-Rapids 소프트웨어 분석 도구는 기존 소프트웨어 개발 툴체인에 얼마나 효과적으로 통합되어 지속적인 품질 평가 및 QR 지원을 가능하게 하는가?
• RQ3 RQ3: QFL 프로세스는 측정 가능한 지표를 통해 품질 요구사항의 추적성, 모니터링 및 검증을 얼마나 향상시키는가?

주요 결과

• QFL 프로세스는 Softeam의 애자일 워크플로우에 품질 요구사항 관리를 성공적으로 통합하여 QR 생애주기 전반에 걸쳐 수요 유도, 계획 수립, 피드백 모니터링를 포함한다.
• Q-Rapids가 제안한 7개의 QR 중 57%가 수락되어 Modelio 제품 루트맵에 포함되었으며, 이는 데이터 기반 QR 추천의 실용성과 수용성을 입증한다.
• 프로젝트 매니저가 QR 포함 여부에 최종 결정권을 유지함으로써 신뢰도와 수용도가 향상되었으며, 도구는 근거 제시와 결론 모니터링을 통해 투명성을 제공했다.
• Q-Rapids와 OpenProject의 통합은 품질 팀과 개발 팀 간 원활한 소통을 가능하게 하여 기능 간 협업과 프로세스 가시성을 향상시켰다.
• 프로젝트 실행 중에 생성된 공식화된 QR 카탈로그는 팀 간 지식 재사용을 가능하게 하여 일관된 품질 관행을 촉진하고 시간이 지남에 따라 제품 품질을 향상시켰다.
• QFL 프로세스는 품질 엔지니어가 품질을 체계적으로 홍보할 수 있는 수단을 제공하고, '품질 피드백 루프' 전략적 지표를 통해 품질 모니터링를 개발 라이프사이클에 통합함으로써 조직의 품질 문화를 강화했다.