[논문 리뷰] Optimal Relay Selection with Channel Probing in Wireless Sensor Networks

Kolar Purushothama Naveen, Anurag Kumar|arXiv (Cornell University)|2011. 07. 28.

Energy Efficient Wireless Sensor Networks참고 문헌 21인용 수 3

한 줄 요약

이 논문은 노드가 무작위로 절전 모드에서 깨지고 보상 분포만 공개하는 무선 센서 네트워크를 위한 마르코프 결정 과정 기반 릴레이 선택 기법을 제안한다. 정확한 보상은 탐색을 통해만 파악할 수 있으며, 최적 정책은 제한된 정책 클래스 내에서 임계값 기반 정지 규칙임이 입증되며, 이는 제약된 경우와 유사한 성능을 보이며 전달 지연을 최소화한다.

ABSTRACT

Motivated by the problem of distributed geographical packet forwarding in a wireless sensor network with sleep-wake cycling nodes, we propose a local forwarding model comprising a node that wishes to forward a packet towards a destination, and a set of next-hop relay nodes, each of which is associated with a reward that summarises the cost/benefit of forwarding the packet through that relay. The relays wake up at random times, at which instants they reveal only the probability distributions of their rewards (e.g., by revealing their locations). To determine a relay's exact reward, the forwarding node has to further probe the relay, incurring a probing cost. Thus, at each relay wake-up instant, the source, given a set of relay reward distributions, has to decide whether to stop (and forward the packet to an already probed relay), continue waiting for further relays to wake-up, or probe an unprobed relay. We formulate the problem as a Markov decision process, with the objective being to minimize the packet forwarding delay subject to a constraint on the effective reward (the difference between the total probing cost and the actual reward of the chosen relay). Our problem can be considered as a variant of the asset selling problem with partial revelation of offers. The most general class of decision policies can keep awake any or all the relays that have woken up. In this paper, we study the optimum over a restricted class of policies which, at any time, can keep only one unprobed relay awake, in addition to the best among the probed relays. We prove that the optimum stopping policy over this class is of threshold type, where the same threshold is used at each relay wake-up instant. Numerically, we find that the performance of the optimum over the restricted class is very close to that over the unrestricted class.

연구 동기 및 목표

• 수면-깨어남 주기로 작동하는 무선 센서 네트워크에서 분산 지리적 패킷 포워딩의 과제를 해결한다.
• 전달 지연을 최소화하면서 보상 제약 조건을 만족시키는 조건에서 릴레이 선택 문제를 마르코프 결정 과정(MDP)으로 수식화한다.
• 탐색 비용과 릴레이 보상 사이의 트레이드오프를 모델링하며, 초기에는 릴레이 보상의 확률적 분포만 공개된다.
• 한 번에 하나의 탐색되지 않은 릴레이만 활성화되어 있고, 최고의 탐색된 릴레이를 유지하는 정책 클래스를 제한한다.
• 이 제한된 정책 클래스 내에서 최적의 정지 정책을 결정하고, 이는 비제한 정책 클래스에 비해 성능을 평가한다.

제안 방법

• 상태를 탐색된 릴레이 집합과 탐색되지 않은 릴레이의 현재 보상 분포로 정의하는 마르코프 결정 과정(MDP)으로 릴레이 선택 문제를 모델링한다.
• 보상은 실제 릴레이 보상과 누적 탐색 비용의 차이로 정의되며, 유효 보상에 대한 제약 조건이 존재한다.
• 각 빈도에서 예상 보상이 고정된 임계값을 초과하는지 여부에 따라 탐색 여부 또는 정지 여부를 결정하는 임계값 기반 정지 정책을 사용한다.
• 정책 클래스를 제한하여 언제나 하나의 탐색되지 않은 릴레이만 활성화되도록 한다. 이는 의사결정 공간을 단순화한다.
• 동적 프rogram밍과 값 반복 추론을 사용하여, 이 제한된 클래스 내에서 최적 정책이 임계값 유형임을 증명한다.
• 비제한 정책 클래스에 대한 이론적 최적 성능과 비교하여 수치적으로 성능을 평가한다. 이는 임계값 정책의 지연 및 보상 성능을 분석한다.

실험 결과

연구 질문

• RQ1 노드가 깨어날 때 보상에 대한 부분 정보만 공개될 경우, 릴레이 선택에 대한 최적의 정지 정책은 무엇인가?
• RQ2 한 번에 하나의 탐색되지 않은 릴레이만 유지하는 제한된 정책 클래스의 성능은 비제한 정책 클래스에 비해 어떻게 비교되는가?
• RQ3 임계값 기반 정책는 보상 제약 조건 하에서 전달 지연을 최소화하는 데서 near-optimal 성능를 달성할 수 있는가?
• RQ4 탐색 비용은 릴레이 선택에서 지연과 유효 보상 사이의 트레이드오프에 어떤 영향을 미치는가?
• RQ5 보상 분포의 구조는 정지 규칙의 최적성과 임계값 값에 어떤 영향을 미치는가?

주요 결과

• 제한된 정책 클래스 내에서 최적의 정지 정책은 임계값 유형이며, 모든 릴레이 깨어남 순간에 동일한 임계값이 적용된다.
• 제한된 정책 클래스 내 최적 정책의 성능은 이론적 최적 성능과 수치적으로 매우 유사하다.
• 임계값 정책는 탐색 비용과 보상 증가 사이의 균형을 효과적으로 유지하며, 유효 보상 제약 조건 하에서 기대 전달 지연을 최소화한다.
• 모델은 부분 관측 가능한 환경에서 탐색(새로운 릴레이 탐색)과 이용(가장 좋은 탐색된 릴레이 선택) 사이의 트레이드오프를 잘 반영한다.
• 고정된 임계값을 사용함으로써 구현이 단순화되면서도 near-optimal 성능를 유지할 수 있어 자원 제약이 있는 센서 네트워크에 적합하다.
• 문제는 부분 공개 조건 하에서 자산 판매 문제의 변종으로 프레임워크화되었으며, 이는 존재하는 이론을 무선 네트워크 환경으로 확장한다.