[논문 리뷰] Optimal control of end-user energy storage

Peter M. van de Ven, Nidhi Hegde외 2명|arXiv (Cornell University)|2012. 03. 08.

Smart Grid Energy Management참고 문헌 14인용 수 14

한 줄 요약

이 논문은 확률적 가격과 수요 하에서 장기적인 에너지 비용을 최소화하기 위해 동적 프로그래밍을 사용하여 최적의 제어 정책을 제안한다. 두 개의 임계값 정책(하한 이하일 땐 충전, 상한 이상일 땐 방전)의 존재를 증명하며, 특히 배터리 비효율성과 함께 실시간 가격 제도 하에서 수치 실험을 통해 뚜렷한 비용 절감 효과를 입증한다.

ABSTRACT

An increasing number of retail energy markets show price fluctuations, providing users with the opportunity to buy energy at lower than average prices. We propose to temporarily store this inexpensive energy in a battery, and use it to satisfy demand when energy prices are high, thus allowing users to exploit the price variations without having to shift their demand to the low-price periods. We study the battery control policy that yields the best performance, i.e., minimizes the total discounted costs. The optimal policy is shown to have a threshold structure, and we derive these thresholds in a few special cases. The cost savings obtained from energy storage are demonstrated through extensive numerical experiments, and we offer various directions for future research.

연구 동기 및 목표

• 동적 가격 체제로 인해 변동하는 에너지 가격에 직면한 엔드유저가 장기적인 에너지 비용을 최소화하는 데 도전하는 문제를 다루기 위해.
• 수요 패턴을 변화시키지 않고 가격 차익을 활용할 수 있도록 최적의 배터리 제어 정책을 설계하기 위해.
• 확률적 가격 및 수요 동역학, 배터리 비효율성, 연속 상태 공간을 포함한 마르코프 결정 과정(MDP)으로 문제를 모델링하기 위해.
• 할인된 비용을 최소화하는 두 개의 임계값 정적 정책의 존재를 유도하고 증명하기 위해.
• 실시간 및 시간대별 가격 제도 하에서 광범위한 수치 실험을 통해 최적 정책의 성능을 평가하기 위해.

제안 방법

• 확률적 가격 및 수요 과정을 포함한 연속 상태 마르코프 결정 과정(MDP)으로 에너지 저장 제어 문제를 수립한다.
• 동적 프로그래밍을 사용하여 최적의 잔여비용 함수를 유도하고 가치 함수의 구조적 성질을 확립한다.
• 최적 정책이 두 개의 임계값 구조를 가짐을 증명한다: 배터리 수준이 하한 이하일 땐 충전, 상한 이상일 땐 방전.
• 일반적으로 동일한 분포를 따르는 가격과 특정한 가격 분포의 경우에 대해 임계값의 해석적 표현을 도출한다.
• 배터리 비효율성(충전 및 방전 손실)을 모델에 통합하여, 이상적인 모델과 비교해 최적 정책의 구조가 본질적으로 달라짐을 보여준다.
• 유한한 수평기 간격 근사와 귀납법을 활용하여 가치 함수의 하위모듈라리티 및 단조성 성질을 증명하며, 이는 임계값 구조를 뒷받침한다.

실험 결과

연구 질문

• RQ1 확률적 가격 및 수요 동역학 하에서 장기 할인 에너지 비용을 최소화하는 엔드유저 에너지 저장의 최적 제어 정책은 무엇인가?
• RQ2 최적 정책은 임계값 구조를 보이며, 만약 그렇다면 임계값은 가격 및 수요 분포에 어떻게 의존하는가?
• RQ3 배터리 비효율성은 이상적인 손실 없는 모델과 비교해 최적 제어 정책의 구조와 성능에 어떤 영향을 미치는가?
• RQ4 실시간 가격 제도 하에서 직접 전력망 사용 대비 최적 에너지 저장을 통해 달성 가능한 비용 절감은 어느 정도인가?
• RQ5 시간대별 및 실시간 가격 제도와 같은 다양한 가격 체제 하에서 최적 정책의 성능은 어떻게 되며, 주요 성능 결정 요소는 무엇인가?

주요 결과

• 엔드유저 에너지 저장의 최적 제어 정책은 두 개의 임계값 구조를 가진다: 배터리 수준이 하한 이하일 땐 충전, 상한 이상일 땐 방전.
• 현재 가격이 높을수록 임계값이 감소함을 나타내며, 이는 높은 가격에서 더 이르게 방전하고 더 늦게 충전함을 의미한다.
• 수치 실험을 통해 직접 전력망 사용 대비 뚜렷한 비용 절감 효과를 입증하며, 장기적인 에너지 비용을 크게 감소시킨다.
• 배터리 비효율성은 최적 정책의 구조를 본질적으로 변화시키며, 손실 없는 모델과 비교해 더 복잡한 임계값 정책을 만든다.
• 일반적으로 동일한 분포를 따르는 가격의 경우, 임계값은 현재 배터리 수준과 무관하며 가격 분포와 할인 요소에만 의존한다.
• 가치 함수가 하위모듈라리티임을 증명하고, 잔여비용 함수의 차이는 배터리 수준 차이에 대해 선형 함수로 유계임을 보여주며, 이는 임계값 구조를 뒷받침한다.