[논문 리뷰] Coding of Markov dynamics for multiscale community detection in complex networks

Michael T. Schaub, Renaud Lambiotte외 1명|arXiv (Cornell University)|2011. 01. 01.

Complex Network Analysis Techniques참고 문헌 28인용 수 1

한 줄 요약

이 논문은 시간 진동을 맵 방정식 프레임워크에 통합하여 복잡한 네트워크에서 다중 척도 공동체 탐지에 적합한 동적 코딩 방법을 제안한다. 다단계 전이 행렬을 분석함으로써 기존의 한 단계 코딩이 가진 시야 한계를 초월하여 보다 큰, 더 복잡한 공동체를 감지할 수 있으며, 압축 갭을 줄이고 다양한 네트워크 척도에서의 확장성도 향상시킨다.

ABSTRACT

The detection of community structure in complex networks is intimately related to the problem of finding a concise description of the network in terms of its modules. This notion has been recently exploited by the Map equation formalism (M. Rosvall and C. T. Bergstrom, PNAS, vol. 105, no. 4, pp. 1118–1123, 2008) through an information-theoretic characterization of the process of coding the transitions of a random walker inside and between communities at stationarity. However, a thorough consideration of the relationship between a time-evolving Markov dynamics and the coding mechanism is still lacking. We show that the original one-step coding scheme used by the Map equation method neglects the internal structure of the communities and introduces an upper scale, the ’field-of-view’ limit, for the communities that it can detect. Although the Map equation method is known for its good performance on clique-like graphs, the field-of-view limit can result in undesirable overpartitioning when communities are far from clique-like. We show that a signature of this behavior is a large compression gap: a large deviation of the Map compression from the ideal limit, the entropy rate of the Markov process. To address this issue, we propose a simple dynamic approach that introduces time explicitly into the Map coding procedure through the analysis of the time-evolving multistep transition matrix of the Markov process. The so-induced dynamical zooming across scales can reveal (potentially multiscale) community structure above the field-ofview limit with the relevant partitions indicated by a small compression gap. Finally, we discuss how the interplay between coding and dynamics could be further developed to improve the detection of community structure in networks.

연구 동기 및 목표

• 기존 맵 방정식 방법의 한계를 해결하기 위해, 이는 한 단계 코딩 방식으로 인해 탐지 가능한 공동체의 최대 척도(시야)에 제한을 둔다.
• 시간에 따라 변화하는 마르코프 역학이 공동체 탐지 정확도와 네트워크 코딩의 압축 효율성에 어떤 영향을 미치는지 조사한다.
• 다단계 시간 진동을 명시적으로 모델링하는 동적 코딩 프레임워크를 개발하여 숨겨진 다중 척도 공동체 구조를 드러낸다.
• 압축 갭(마르코프 과정의 엔트로피율과 실제 압축 사이의 편차)을 줄여 과다 분할과 구조적 정확도 결여를 진단한다.
• 다단계 전이 행렬을 활용해 척도 간 역동적 줌 인 기능을 가능하게 하여, 클리크 유사 구조가 아닌 공동체를 더 잘 탐지한다.

제안 방법

• 랜덤 워커가 네트워크 공동체를 통해 시간에 따라 변화하는 행동을 모델링하기 위해 다단계 전이 행렬을 도입한다.
• 기존 맵 방정식의 한 단계 코딩 방식을 시간적 상관관계를 고려한 동적 코딩 절차로 대체한다.
• 마르코프 과정의 엔트로피율을 압축의 이론적 하한선으로 사용하여 이상적인 압축 한계를 정의한다.
• 실제 압축과 엔트로피율의 차이로 압축 갭을 측정하여 탐지 품질 평가 및 과다 분할 방지를 한다.
• 기존 방법의 시야 한계를 초월해 공동체 구조를 탐지하기 위해 동적 코딩 프레임워크를 적용한다.
• 시간 범위를 점차 늘여가며 전이 역학을 분석함으로써 척도 간 계층적 줌 인 메커니즘을 구현한다.

실험 결과

연구 질문

• RQ1 기존 맵 방정식의 한 단계 코딩 방식은 비클리크 유사 공동체의 내부 구조를 어떻게 제대로 포착하지 못하는가?
• RQ2 복잡한 비클리크 네트워크에서 공동체를 탐지할 때, 시야 한계가 과다 분할을 유도하는 데 어떤 역할을 하는가?
• RQ3 코딩 과정에 시간 진동을 통합함으로써 더 큰, 더 복잡한 공동체 구조를 탐지하는 데 성능 향상이 가능한가?
• RQ4 압축 갭은 공동체 탐지에서 구조적 정확도와 과다 분할과 어떻게 관련이 있는가?
• RQ5 여러 시간 단계에 걸친 동적 코딩을 통해 원래 맵 방정식이 감지하지 못하는 다중 척도 공동체 구조는 어느 정도 드러날 수 있는가?

주요 결과

• 기존 맵 방정식의 한 단계 코딩 방식은 비클리크 유사 네트워크 구조에서 특히 큰 공동체 탐지에 제한을 둔다.
• 실제 압축과 엔트로피율의 차이로 정의되는 큰 압축 갭은 과다 분할과 구조적 정확도 결여를 신뢰할 수 있는 지표로 기능한다.
• 다단계 전이 행렬을 기반으로 한 제안된 동적 코딩 방법은 시야 한계를 초월해 공동체 구조를 성공적으로 탐지한다.
• 동적 방법을 사용해 탐지된 공동체는 실제 마르코프 과정의 엔트로피율과 더 잘 일치함을 보여주며, 압축 갭이 현저히 작다.
• 이 방법은 척도 간 역동적 줌 인을 가능하게 하여, 정적 한 단계 코딩이 놓친 잠재적인 다중 척도 공동체 계층을 드러낸다.
• 코딩과 시간 진동 역학 간의 상호작용은 복잡한 네트워크에서 공동체 탐지의 원리적인 틀을 제공한다.