[논문 리뷰] Towards an interdisciplinary, socio-technical analysis of software ecosystem health

Tom Mens, Bram Adams외 1명|arXiv (Cornell University)|2017. 11. 13.

Green IT and SustainabilityEngineering참고 문헌 21인용 수 16

한 줄 요약

이 논문은 생태학적 및 독성학적 원리를 소프트웨어 공학 메트릭과 융합하여 소프트웨어 생태계 건강도를 평가하고 향상시키기 위한 다학제적이고 사회기술적 접근법을 제안한다. npm과 RubyGems와 같은 오픈소스 생태계의 혼합 방법 분석을 통해 기술적 및 사회적 건강 지표를 측정하고, 사고의 영향을 모델링하며 생태계의 복원력을 예측하는 프레임워크를 도입한다. 주요 발견은 취약성, 개발자 이탈, 종속성 네트워크 역학성에 관한 것이다.

ABSTRACT

This extended abstract presents the research goals and preliminary research results of the interdisciplinary research project SECOHealth, an ongoing collaboration between research teams of Polytechnique Montreal (Canada), the University of Mons (Belgium) and Laval University (Canada). SECOHealth aims to contribute to research and practice in software engineering by delivering a validated interdisciplinary scientific methodology and a catalog of guidelines and recommendation tools for improving software ecosystem health.

연구 동기 및 목표

• 현대 디지털 인프라에서 소프트웨어 생태계(이하 SECO)의 광범위한 역할을 감안할 때, SECO 건강도를 모니터링하고 개선하기 위한 체계적 도구와 지침의 부족을 해결한다.
• 소프트웨어 공학, 생태학, 독성학을 융합한 검증된 다학제적 방법론을 개발하여, 개별 프로젝트 수준의 미세 분석과 생태계 전체 수준의 거시 분석을 모두 가능하게 한다.
• 취약성, 독성, 다양성, 복원력 등 기술적 및 사회적 건강 지표를 측정 가능한 메트릭으로 정의하고 운영화하여 사전적 생태계 관리 지원을 가능하게 한다.
• 특정 사건—예를 들어 패키지 삭제 또는 핵심 기여자 이탈—이 SECO 안정성과 지속 가능성에 미치는 영향을 예측하는 모델을 구축한다.
• SECO 유지보수자들이 생태계 건강도, 지속 가능성, 장기적 생존을 향상시키기 위해 실행 가능한 지침과 권고안을 마련한다.

제안 방법

• 버전 제어, 버그 트래킹, 코드 리뷰, 메일링 리스트 데이터의 하향식 데이터 마이닝과, 리눅스 파운데이션의 서밋에서 실시한 17명의 SECO 전문가 대상 상향식 질적 인터뷰를 융합한 혼합 방법 접근법을 적용한다.
• npm과 RubyGems 생태계에서 기술적 및 사회적 요인을 바탕으로 개발자 기여 중단 확률을 모델링하기 위해 생존 분석을 사용한다.
• 성장, 변화 가능성, 재사용 가능성, 취약성 등을 포함한 종속성 네트워크의 진화를 정량화하는 메트릭을 개발하고, 크기와 연령이 다른 일곱 가지 패키지 배포를 분석한다.
• 다양성(지리적, 시간적, 성별 기반, 활동 기반)이 생태계의 강건성에 미치는 영향을 연구하기 위해 생태학적 개념인 다양성과 복원력 등을 도입한다.
• 시간 압박이나 무관심으로 인한 긴장된 상호작용을 '사회적 부채(social debt)' 개념으로 모델링하여 커뮤니티 갈등이나 기여자 이탈의 원인이 될 수 있음을 분석한다.
• 오픈소스 소프트웨어 개발 분석을 위한 도구체인인 GrimoireLab을 활용하여 메트릭을 운영화함으로써 대규모이고 재현 가능한 생태계 모니터링을 가능하게 한다.

실험 결과

연구 질문

• RQ1 소프트웨어 생태계의 건강도를 반영하는 주요 기술적 및 사회적 지표는 무엇이며, 이를 측정 가능한 메트릭으로 운영화할 수 있는가?
• RQ2 패키지 삭제나 핵심 기여자 이탈과 같은 특정 사건이 소프트웨어 생태계의 전반적인 건강도와 안정성에 어떤 영향을 미치는가?
• RQ3 다양성(예: 성별, 지리, 활동 패턴 등)이 소프트웨어 생태계의 복원력과 지속 가능성에 어느 정도 기여하는가?
• RQ4 건강 문제들이 종속성 네트워크를 통해 어떻게 확산되는가? 이러한 네트워크에서 취약성과 재사용 가능성을 가장 잘 캡처하는 메트릭은 무엇인가?
• RQ5 오픈소스 생태계에서 개발자 기여 중단의 가능성을 예측하는 데 있어 사회적 요인과 기술적 요인은 무엇인가?

주요 결과

• npm과 RubyGems의 다수 패키지가 점점 증가하는 전이 종속성으로 인해 '취약'한 특성을 보이며, 이는 연쇄 실패의 위험을 증가시킨다.
• 생존 분석 결과, 기여자 참여도가 낮거나 코드 복잡도가 높은 등의 특정 사회적·기술적 요인이 개발자 기여 중단 확률을 크게 증가시킴을 확인하였다.
• npm과 CRAN과 같은 주요 생태계의 종속성 네트워크는 시간이 지남에 따라 일관되게 성장하고 있으며, 대부분의 업데이트와 역방향 종속성은 소수의 패키지에 의해 담당된다.
• 패키지당 역방향 종속성 수는 매우 비대칭적이며, 이는 소수의 중심 패키지가 생태계 안정성에 비례해 매우 큰 영향을 미친다는 것을 시사한다.
• 실증 분석을 통해 기여자 인구통계학적 특성과 활동 패턴의 다양성이 감소할수록 생태계 복원력이 감소하는 것으로 확인되었다.
• 긴장된 커뮤니케이션 패턴을 측정한 사회적 부채는 오픈소스 프로젝트에서 커뮤니티 갈등과 기여자 이탈의 주요 전조로 규명되었다.