[논문 리뷰] AC: An Integrated Source Code Plagiarism Detection Environment

Manuel Freire, Manuel Cebrián외 1명|arXiv (Cornell University)|2007. 03. 28.

Academic integrity and plagiarism참고 문헌 43인용 수 14

한 줄 요약

AC는 교육 현장에서 소스 코드에 대한 이식성 있고 모듈식인 표절 탐지 시스템으로, 과제를 내부 표현으로 변환하고 기존 및 신규 개발된 유사도 측정 방법을 다수 적용하며 통계 분석과 시각화를 지원한다. 여러 학기 동안 평가된 결과, 복잡한 프로그래밍 과제에서 자원 낭비를 줄이고 탐지 정확도를 향상시킨다.

ABSTRACT

Plagiarism detection in educational programming assignments is still a problematic issue in terms of resource waste, ethical controversy, legal risks, and technical complexity. This paper presents AC, a modular plagiarism detection system. The design is portable across platforms and assignment formats and provides easy extraction into the internal assignment representation. Multiple similarity measures have been incorporated, both existing and newly-developed. Statistical analysis and several graphical visualizations aid in the interpretation of analysis results. The system has been evaluated with a survey that encompasses several academic semesters of use at the authors’ institution.

연구 동기 및 목표

• 학술 프로그래밍 과제에서 소스 코드 표절과 관련된 기술적, 윤리적, 법적 과제를 해결하기 위해.
• 다양한 과제 형식을 지원하고 일관된 내부 표현을 가능하게 하는 이식성 있고 플랫폼 독립적인 시스템을 설계하기 위해.
• 다양한 코드 구조에서 강력한 탐지를 위해 기존 및 신규 개발된 다수의 유사도 측정 방법을 통합하기 위해.
• 통계 분석과 상호작용 가능한 시각화를 통해 결과의 해석을 지원하기 위해.
• 저자 소속 기관에서 여러 학기 동안의 장기적 구현을 통해 시스템의 효과성을 평가하기 위해.

제안 방법

• 시스템은 소스 코드 과제를 표준화된 내부 표현으로 변환하여 플랫폼 및 형식에 관계없이 일관성을 확보한다.
• 기존 및 신규 개발된 유사도 측정 방법의 조합을 적용하여 문법적 및 구조적 수준에서 코드 표현을 비교한다.
• 유사도 점수를 정량화하고 비교 간 유의미성을 평가하기 위해 통계 분석을 사용한다.
• 강사들이 탐지 결과를 해석하고 표절 패턴을 식별하는 데 도움이 되도록 그래픽 시각화를 생성한다.
• 확장성과 기존 교육 플랫폼에의 통합을 가능하게 하기 위해 모ularity를 설계한다.
• 저자 소속 기관에서 여러 학기 동안의 종단적 설문 조사를 통해 평가를 수행한다.

실험 결과

연구 질문

• RQ1 AC는 다양한 프로그래밍 과제와 형식에서 표절 탐지에 얼마나 효과적인가?
• RQ2 다수의 유사도 측정 방법 통합이 탐지 정확도에 얼마나 기여하는가?
• RQ3 통계 분석과 시각화는 강사가 표절 결과를 어떻게 이해하는의를 지원하는가?
• RQ4 AC는 여러 학기 동안 실제 교육 현장에서 어떻게 성능을 발휘하는가?
• RQ5 교육적 표절 탐지에서 모듈식이고 이식 가능한 설계의 실용적 이점은 무엇인가?

주요 결과

• AC는 여러 학기 동안 소스 코드 제출물에 대한 효율적이고 확장 가능한 분석을 가능하게 하여 자원 낭비를 줄였다.
• 기존 및 신규 개발된 다수의 유사도 측정 방법 통합으로 다양한 코드 구조에서 탐지 민감도가 향상되었다.
• 통계 분석과 시각화는 강사가 탐지 결과를 해석하는 데 있어 상당한 기여를 하였다.
• 시스템은 여러 학기 동안 실제 교육 환경에서의 구현에서 일관된 성능과 사용성 발휘를 보였다.
• 모듈식이고 이식 가능한 설계 덕분에 다양한 플랫폼과 과제 형식에 원활하게 통합될 수 있었다.
• 장기적 평가를 통해 시스템의 신뢰성과 교육 현장에서의 실용적 가치가 확인되었다.