以倒立双摆为例串起 TorchRL 环境变换、TensorDict、随机策略、Collector、GAE 和裁剪 PPO 训练，并说明默认预算、采样尾批与评估频率的实际边界。