有限记忆POMDP神经强化学习获有限时间遗憾保证
热点事件观察中
有限记忆POMDP神经强化学习获有限时间遗憾保证
1 篇报道1 个报道来源2 天前更新
先了解这件事
AI 综述
Jingjuan Huang 发表论文,首次为有限记忆 POMDP 给出基于非线性神经价值函数逼近的有限时间次线性 regret 保证。作者称,据其所知,这类基于神经函数逼近的有限时间次线性 regret 保证在有限记忆 POMDP 文献中尚属首次。 方法上,作者先建立有限状态 MDP 的逐点逼近误差界,再把 TD 学习用于 POMDP 生成的 superstate 转移,并针对 superstate MDP 的 Bellman 不动点证明神经 critic 的有限时间误差界;结合策略镜像下降框架,得到相对最优 POMDP 价值的次线性 regret。数值实验验证了理论结果。
AI 根据报道生成 · 6 小时前更新
最新进展11月5日 03:25
有限记忆 POMDP 中神经强化学习的有限时间收敛与 regret 保证报道时间线
沿着报道,了解事件的不同侧面。
11月5日
- arXiv · cs.AI有限记忆 POMDP 中神经强化学习的有限时间收敛与 regret 保证
研究首次为有限记忆 POMDP 给出基于非线性神经价值函数逼近的有限时间次线性 regret 保证。作者先建立新的有限状态 MDP 逐点逼近误差界,再将 TD 学习应用于 POMDP 生成的 superstate 转移并针对 superstate MDP 的 Bellman 不动点,证明神经 critic 的有限时间误差界,结合策略镜像下降框架得到相对最优 POMDP 价值的次线性 regret,数值实验验证了理论结果。
本事件热度走势
- 可比范围当前
- 4
- 可比范围峰值
- 411月6日 11:00
- 近 24 小时变化
- –
01234
11:0012:0013:0014:0015:0016:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。