[논문 리뷰] Evidences of the mismatch between industry and academy on modelling language quality evaluation

Fáber D. Giraldo, Sergio España외 1명|arXiv (Cornell University)|2016. 06. 07.

Model-Driven Software Engineering Techniques참고 문헌 22인용 수 6

한 줄 요약

이 논문은 모델 기반 엔지니어링(MDE)에서 모델링 언어 품질 평가에 대한 산업계와 학계의 시각 간에 심각한 괴리를 규명한다. 38개의 산업계 자료와 14개의 학술 자료를 분석한 결과, 산업계는 도구의 성숙도, 코드 품질, 통합 복잡도와 같은 실용적 고려사항을 우선시하는 반면, 학계는 이론적 프레임워크, 형식적 의미론, 확장성과 같은 주제를 강조함을 확인했다. 이는 MDE 도입을 저해하는 핵심적인 격차를 드러내며, 이는 상호 이해 부족에서 기인한다.

ABSTRACT

Quality is an implicit property of models and modelling languages by their condition of engineering artifacts. However, the quality property is affected by the diversity of conceptions around the model-driven paradigm. In this document is presented a report of quality issues on modelling languages and models. These issues result from an analysis about quality evidences obtained from industrial and academic/scientific contexts.

연구 동기 및 목표

• 모델 기반 엔지니어링(MDE)에서 모델링 언어 품질 평가에 대한 산업계와 학계의 견해 간 괴리를 조사하기 위해.
• 실제 산업 현장과 학술 연구에서 보고된 주요 품질 문제를 식별하고 분류하기 위해.
• 산업계에서는 도구의 성숙도와 코드 품질을 중시하는 반면 학계에서는 형식적 의미론과 확장성을 중시하는 등 서로 다른 우선순위가 MDE 도입에 어떤 영향을 미치는지 분석하기 위해.
• 효과적인 모델링 언어 평가를 저해하는 실용적 및 이론적 과제에 대한 근거 기반 통찰을 제공하기 위해.
• 모델링 언어 평가 프레임워크의 개발을 지원하기 위해, 보다 균형 잡히고 현실적이며 산업 현장에 적합한 평가 기준을 마련하기 위해.

제안 방법

• 38개의 산업계 자료(학술지 논문, 기술 보고서, 웹 페이지)와 14개의 학술 자료(학술지, 컆퍼런스, 워크숍 논문)에서 품질 문제를 체계적으로 추출하기 위해.
• 도구 복잡성, 모델-코드 일치성, 확장성 등의 주제로 문제를 분류하기 위해.
• 각 자료에서 확인된 품질 문제를 뒷받침하는 명시적 진술을 식별하기 위해.
• 인용된 문헌과 그 맥락적 진술을 분석하여 산업계와 학계의 우려를 주제별로 비교하기 위해.
• 인용 분석을 활용하여 산업계 및 학계 맥락에서 품질 우려의 변화 추이를 추적하기 위해.
• 모델의 진화, 도구의 성숙도 부족, 상호운용성 부족 등의 특정 MDE 과제와 문제를 매핑하기 위해.

실험 결과

연구 질문

• RQ1 산업 현장에서 MDE 도입 시 주로 보고되는 주요 품질 문제들은 무엇인가?
• RQ2 학술 연구 공동체는 산업 현장의 실천과 비교해 모델링 언어 품질 문제를 어떻게 프레임워크화하고 해결하고 있는가?
• RQ3 모델링 언어 품질 평가에서 산업계와 학계의 우선순위 간 핵심적 차이점은 무엇인가?
• RQ4 산업계에서의 도구 복잡성과 코드 품질 문제는 학계에서의 모델 의미론 및 형식적 검증 연구와 어느 정도 일치하는가?
• RQ5 모델 노후화, 도구의 성숙도 부족, 상호운용성 부족 등의 문제들이 다양한 맥락에서 MDE 도입에 어떤 영향을 미치는가?

주요 결과

• 산업 현장의 전문가들은 MDE 도입이 도구의 성숙도 부족, 높은 학습 곡선, 기존 개발 절차와의 낮은 통합성으로 인해 저해된다고 보고한다.
• 주요 산업계의 염려는 모델과 생성된 코드 간의 일치성 부족으로, 모델이 자주 노후화되거나 실제 구현과 일치하지 않는다는 점이다.
• 산업계는 모델링 도구를 '중량감 있는' 도구로 간주하며, 설치, 학습, 설정, 사용이 복잡하여 도입에 대한 저항감을 느낀다.
• 학술 연구는 형식적 의미론, 행동 모델링, 대규모 시스템의 확장성에 중점을 두지만, 이러한 문제들은 산업 보고서에는 거의 다루어지지 않는다.
• 모델 품질 프레임워크의 운영화에 대한 대응이 뚜렷하게 부족하며, 학계에서는 메타모델에 시간 및 행동 의미론을 더 잘 지원할 것을 요구하고 있다.
• ArcStyler와 OptimalJ와 같은 이전에 유망했던 MDE 도구들이 기술적 및 사업적 과제로 인해 쇠퇴한 사례들이 있으며, 이는 도구 생태계의 불안정성을 보여준다.