[논문 리뷰] Carbon Responder: Coordinating Demand Response for the Datacenter Fleet

Jiali Xing, Bilge Acun외 6명|arXiv (Cornell University)|2023. 11. 14.

Cloud Computing and Resource Management인용 수 5

한 줄 요약

Carbon Responder는 실시간 및 배치 워크로드를 포함한 이질적인 데이터센터 워크로드 간의 전력 절감을 조율하기 위해 성능 민감도를 모델링하고 공정하고 효율적이며 확장 가능한 탄소 인식 부하 이동을 가능하게 하는 수요 반응 프레임워크이다. 성능 인식 정책을 통해 성능 저하를 공정하게 분배함으로써 기준 대비 최대 2배의 탄소 발자국 감소를 달성한다.

ABSTRACT

The increasing integration of renewable energy sources results in fluctuations in carbon intensity throughout the day. To mitigate their carbon footprint, datacenters can implement demand response (DR) by adjusting their load based on grid signals. However, this presents challenges for private datacenters with diverse workloads and services. One of the key challenges is efficiently and fairly allocating power curtailment across different workloads. In response to these challenges, we propose the Carbon Responder framework. The Carbon Responder framework aims to reduce the carbon footprint of heterogeneous workloads in datacenters by modulating their power usage. Unlike previous studies, Carbon Responder considers both online and batch workloads with different service level objectives and develops accurate performance models to achieve performance-aware power allocation. The framework supports three alternative policies: Efficient DR, Fair and Centralized DR, and Fair and Decentralized DR. We evaluate Carbon Responder polices using production workload traces from a private hyperscale datacenter. Our experimental results demonstrate that the efficient Carbon Responder policy reduces the carbon footprint by around 2x as much compared to baseline approaches adapted from existing methods. The fair Carbon Responder policies distribute the performance penalties and carbon reduction responsibility fairly among workloads.

연구 동기 및 목표

• 다양한 서비스 수준 목표를 가진 이질적인 워크로드 간의 수요 반응을 사설 하이퍼스케일 데이터센터에서 효과적으로 조율하는 데 도전하는 것.
• 성능 민감도를 고려한 전력 할당 정책을 개발하여 워크로드 간 성능 저하와 탄소 감축 책임을 공정하게 분배하는 것.
• 실제 데이터센터 환경에서의 성능 탄력성과 탄소 강도 동적 변화를 모델링하여 효율적이고 확장 가능한 수요 반응을 가능하게 하는 것.
• 재생 가능 에너지 통합 전력망에서 효율성, 공정성, 탄소 감축 간의 상호 상충 관계를 탐색하는 것.
• 생산 규모의 데이터센터에서 중앙집중식 및 분산형 수요 반응 정책 배포를 지원하는 프레임워크를 제공하는 것.

제안 방법

• 실제 운영 트레이스를 사용하여 실시간 및 배치 워크로드의 성능 탄력성을 모델링하고 전력 감소 단위당 성능 손실을 정량화한다.
• 다양한 워크로드 간 성능 비용과 탄소 혜택을 비교할 수 있는 통합 지표를 도입하여 상호 워크로드 간의 교환 분석을 가능하게 한다.
• 세 가지 핵심 정책을 제안한다: 효율적 수요 반응(전체 성능 저하를 최소화), 공정하고 중앙집중식 수요 반응(최적화를 통한 저하 균형), 공정하고 분산형 수요 반응(확장성을 위한 인cent림 메커니즘 사용).
• 시간에 따라 변화하는 전력망 탄소 강도 데이터(예: CAISO 2021 및 예측된 2050 추세)를 사용하여 전력 조절 결정을 안내한다.
• 실제 사설 하이퍼스케일 데이터센터의 워크로드 트레이스를 사용하여 성능 모델을 校정하여 실용적 관련성을 확보한다.
• 동적 부하 이동을 지원한다: 고탄소 기간 동안 비핵심 워크로드를 연기하거나 성능을 저하시키고, 저탄소 기간에는 가속화한다.

실험 결과

연구 질문

• RQ1 사설 데이터센터에서 다양한 서비스 수준 목표를 가진 이질적인 워크로드 간에 수요 반응을 효과적으로 조율하는 방법은 무엇인가?
• RQ2 혼합된 실시간 및 배치 워크로드에 전력 절감을 적용할 경우 발생하는 성능 비용 대 탄소 감축 간의 상호 상충 관계는 어떻게 드러나는가?
• RQ3 전력 변화에 대한 민감도가 다른 워크로드 간 성능 저하 분배의 공정성을 달성하는 방법은 무엇인가?
• RQ4 중앙집중식 대비 분산형 정책 배포가 확장성과 탄소 감축 효율성에 미치는 영향은 어떠한가?
• RQ5 실제 데이터센터 워크로드와 전력망 탄소 강도 데이터를 통합했을 때 수요 반응이 운영 탄소를 얼마나 줄일 수 있는가?

주요 결과

• 효율적 수요 반응 정책은 기존 문헌에서 유도된 기준 수요 반응 접근 방식 대비 데이터센터의 탄소 발자국을 1.5배에서 2배까지 감소시킨다.
• 공정하고 중앙집중식 수요 반응 정책은 워크로드 간 성능 저하를 균형 있게 분배하여 한 워크로드가 비례하지 않게 큰 영향을 받지 않도록 보장한다.
• 공정하고 분산형 수요 반응 정책은 중앙 집중적 조율 없이도 공정성을 유지하면서 확장 가능한 분산 배포를 가능하게 한다.
• Carbon Responder의 성능 모델은 워크로드 민감도를 정확히 포착하여 의도치 않은 성능 저하를 최소화하는 정밀한 전력 할당을 가능하게 한다.
• 프레임워크는 시간당 탄소 강도 데이터를 결합함으로써 다양한 지역에서 운영 탄소를 40~75%까지 감소시킬 수 있음을 시현한다.
• 추가 하드웨어의 탄소 배출량을 고려하더라도 Carbon Responder를 통한 수요 반응은 데이터센터의 탄소 발자국에 네트워크 감소 효과를 초래한다.