(On-going) Neural SDEs for Uncertainty-aware, Offline RL

아직 꼼꼼하게 다 보지 못함. 보는 中

 

Continous-time Modeling of Counterfactual Outcomes using Neural CDEs (내가 무척 좋아하는 paper) 는

Model-based Offline RL 로도 formulate 할 수 있다. 

 

굳이? 라고 할 수도 있는데..formal 하게 problem 을 define 할 수 있지 않을까? 하는 생각에 굳이 ㅎㅎ 탐구 중이다.

 

사실.. 이번 학기 RL을 공부해온 최종 목적지가 여기였다.

하지만 Model-based & Offline RL에 도달하지 못했다. 

시간이 조금 걸릴 것 같다.

 

차이점은 여기서는 Neural SDE로 dynamics를 modeling한다. 

Neural CDE가 굉장히 매력있듯이, Neural SDE도 굉장히 매력있는데, 그 이유는 Uncertainty를 explicit하게 modeling할 수 있기 때문이다. (내가 좋아하는 bayesian learning을 할 수 있다).

 

 

https://github.com/cevahir-koprulu/sde4mbrltatu/tree/iclr2025

GitHub - cevahir-koprulu/sde4mbrltatu

---

---

---

---

---

---

---

---

---

---

---

---

---