跳到正文
我的
热点事件观察中

有限记忆POMDP神经强化学习获有限时间遗憾保证

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

Jingjuan Huang 发表论文,首次为有限记忆 POMDP 给出基于非线性神经价值函数逼近的有限时间次线性 regret 保证。作者称,据其所知,这类基于神经函数逼近的有限时间次线性 regret 保证在有限记忆 POMDP 文献中尚属首次。 方法上,作者先建立有限状态 MDP 的逐点逼近误差界,再把 TD 学习用于 POMDP 生成的 superstate 转移,并针对 superstate MDP 的 Bellman 不动点证明神经 critic 的有限时间误差界;结合策略镜像下降框架,得到相对最优 POMDP 价值的次线性 regret。数值实验验证了理论结果。

AI 根据报道生成 · 6 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv · cs.AI
    有限记忆 POMDP 中神经强化学习的有限时间收敛与 regret 保证

    研究首次为有限记忆 POMDP 给出基于非线性神经价值函数逼近的有限时间次线性 regret 保证。作者先建立新的有限状态 MDP 逐点逼近误差界,再将 TD 学习应用于 POMDP 生成的 superstate 转移并针对 superstate MDP 的 Bellman 不动点,证明神经 critic 的有限时间误差界,结合策略镜像下降框架得到相对最优 POMDP 价值的次线性 regret,数值实验验证了理论结果。

本事件热度走势

可比范围当前
4
可比范围峰值
411月6日 11:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。