[논문 리뷰] The various facets of random walk entropy

Z. Burda, Jarosław Duda외 2명|arXiv (Cornell University)|2010. 04. 21.

Statistical Mechanics and Entropy참고 문헌 5인용 수 3

한 줄 요약

이 논문은 그래프에서 일반적인 랜덤 워크(GRW)와 최대 엔트로피 랜덤 워크(MERW)라는 두 가지 서로 다른 랜덤 워크 모델을 소개하고 비교한다. 여기서 MERW는 고정된 길이와 시작/끝 지점의 모든 경로가 동일하게 확률을 가지도록 하여 전반적인 경로 엔트로피를 최대화한다. 주요 결과는 MERW가 약하게 희석된 격자에서 강한 국소화를 보이며, 고립된 결함이 없는 영역에 입자를 갇히게 하는 고전적 리프시츠 현상에 의해 발생하는 반면, GRW는 균일하게 퍼지므로, 비정질 조건 하에서 정(stationary) 분포와 역학의 근본적인 차이를 드러낸다.

ABSTRACT

We review various features of the statistics of random paths on graphs. The relationship between path statistics and Quantum Mechanics (QM) leads to two canonical ways of defining random walk on a graph, which have different statistics and hence different entropies. Generic random walk (GRW) is in correspondence with the field-theoretical formalism, whereas maximal entropy random walk (MERW), introduced by us in a recent work, is motivated by the Feynman path-integral formulation of QM. GRW maximizes entropy locally (neighbors are chosen with equal probabilities), in contrast to MERW which does so globally (all paths of given length and endpoints are equally probable). The stationary distribution for MERW is given by the ground state of a quantum-mechanical problem where nodes whose degree is smaller than average act as repulsive impurities. We investigate static and dynamical properties GRW and MERW in a variety of examples in one and two dimensions. The most spectacular difference arises in the case of weakly diluted lattices, where a particle performing MERW gets eventually trapped in the largest nearly spherical region which is free of impurities. We put forward a quantitative explanation of this localization effect in terms of a classical Lifshitz phenomenon.

연구 동기 및 목표

• 그래프에서 일반적인 랜덤 워크(GRW)와 최대 엔트로피 랜덤 워크(MERW) 간의 통계적 및 엔트로피적 차이를 명확히 하기 위해.
• MERW가 파이먼 경로 적분에 기반하여 전반적인 경로 엔트로피를 최대화하는 반면, GRW는 局부 엔트로피를 최대화한다는 점을 입증하기 위해.
• 불순물(예: 희석된 격자)이 GRW와 MERW의 정 분포와 역학에 미치는 영향을 조사하기 위해.
• 불순물이 있는 시스템에서 고전적 리프시츠 현상에 기반하여 MERW 국소화를 정량적으로 설명하기 위해.
• MERW 정 분포가 인접행렬의 페로-프로베누스 고유벡터에 의해 결정되며, 이는 반발력을 갖는 불순물이 있는 양자역학적 타이트-버인드 모델과 연결됨을 보여주기 위해.

제안 방법

• GRW를 각 단계에서 이웃 노드들 중에서 균일하게 선택하는 마코프 과정으로 정의하여 局부 엔트로피 생산을 최대화한다.
• MERW를 고정된 길이와 시작/끝 지점의 모든 경로가 동일하게 확률을 가지도록 하는 마코프 과정으로 정의하여 전반적인 엔트로피를 최대화한다.
• 인접행렬 $ A $ 를 사용하여 경로를 세고, 가장 큰 고유값과 그에 해당하는 페로-프로베누스 고유벡터 $ \psi_1 $ 를 유도하며, 이는 MERW 정 분포 $ \pi_a = \psi_{1a}^2 $ 를 결정한다.
• 비정규 그래프에서 노드의 차수 이질성을 양자역학적 타이트-버인드 해밀토니안에서의 반발력 퍼텐셜 $ V_a = k_{\text{max}} - k_a $ 로 모델링한다.
• 리프시츠 이론을 적용하여 희석된 격자에서 가장 큰 거의 구형의 결함이 없는 영역의 크기 $ R_1 $ 을 추정하며, $ R_1 \sim (\ln L / |\ln p|)^{1/d} $ 라는 예측을 한다.
• 다양한 결함 농도 $ q $ 를 가진 $ 40 \times 40 $ 격자에서 수치 시뮬레이션을 통해 GRW와 MERW의 역학을 비교하며, 시간에 따른 확률 분포의 변화를 추적한다.

실험 결과

연구 질문

• RQ1 비정규적이거나 불순물이 있는 그래프에서 GRW와 MERW는 경로 통계와 정 분포에서 어떻게 다를까?
• RQ2 왜 약하게 희석된 격자에서 MERW는 가장 큰 결함이 없는 영역에 국소화되지만, GRW는 그렇지 않을까?
• RQ3 MERW 국소화와 불순물이 있는 시스템에서의 고전적 리프시츠 현상 사이의 정량적 연결은 무엇인가?
• RQ4 정 상태에 도달하기 전의 일시적 단계에서 GRW와 MERW의 역학적 행동은 어떻게 다를까?
• RQ5 페로-프로베누스 고유벡터는 임의의 그래프에서 MERW의 정 분포를 결정하는 데 어떤 역할을 하는가?

주요 결과

• MERW 정 분포는 페로-프로베누스 고유벡터 성분 $ \psi_{1a}^2 $ 의 비례함수이며, 이는 낮은 차수를 가진 노드에 반발력을 갖는 불순물이 있는 양자역학적 해밀토니안의 기본 상태에 해당한다.
• 약하게 희석된 2차원 격자에서, MERW는 입자를 가장 큰 거의 구형의 결함이 없는 영역에 국소화시키며, 결함 농도 $ q = 0.001, 0.01, 0.05, 0.1 $ 에 대해 각각 추정된 반지름 $ R_1 = 34.3, 10.8, 4.78, 3.34 $ 를 보인다.
• 차원 수 $ d \geq 2 $ 에서, 가장 큰 리프시츠 영역의 크기는 $ R_1 \sim (\ln L / |\ln p|)^{1/d} $ 로 스케일링되며, 기본 상태의 에너지는 $ E_1 \sim (|\ln p| / \ln L)^{2/d} $ 로 스케일링되어 시스템 크기와 함께 로그적으로 증가함을 나타낸다.
• MERW에서 국소화 영역과 확산 영역 간의 전이가 발생하는 시점은 $ qL^d \sim \ln L $ 일 때이며, 이는 큰 시스템에서 조그만 수의 불순물만으로도 국소화를 유도할 수 있음을 의미한다.
• 역학적 시뮬레이션 결과, GRW는 격자 전반에 균일하게 퍼지지만, MERW는 진정한 기본 상태에 도달하기 전에 점점 더 큰 결함이 없는 영역으로의 메타안정 상태를 순차적으로 탐색하는 것으로 나타나, 빠른 국소적 리아케이션과 느린 영역 간 터널링이라는 두 가지 시간 스케일이 존재함을 시사한다.
• 유한한 불순물 농도 $ q $ 를 가진 큰 $ d $-차원 격자에서 MERW의 정 분포는 체적 $ \Omega_1 \sim R_1^d \sim \ln L / q $ 의 영역에 국소화되며, 이는 시스템 크기 $ L $ 에 대해 로그적으로 증가함을 보인다.