마르코프 의사결정 프로세스를 활용하여 전기 부하 불확실성 하에서 건물 에너지 저장 시스템의 실시간 최적 스케줄링 방법을 제안하였다.
사용자의 반응을 고려하여 장기적인 수익을 최대화하는 광고 경매 메커니즘을 제안한다.
The authors derive minimax sample complexity lower bounds as well as upper bounds for estimating risk measures such as variance, Value-at-Risk (VaR), and Conditional Value-at-Risk (CVaR) in discounted Markov cost processes.