Dynamical Systems 关注状态如何随时间变化。它为 World Model 提供最基本的语言:模型不只预测当前输入的下一个 token,还要描述 action 作用后环境可能进入的下一个 state。
核心记号
- :环境在时刻 的 state;
- :模型或 agent 在时刻 采取的 action;
- :action 之后的下一个 state;
- :描述状态转移的 transition dynamics。
现实任务中,模型通常只能看到 observation ,而不能直接访问完整的 state。于是还需要研究 observation model、partial observability、memory 和 state estimation。
Reading Path
state
-> observation
-> transition
-> action-conditioned future
-> planning and control