如何启动Julia强化学习实验？遇params未定义错误求助

一、修复UndefVarError: params not defined错误 #

错误根源是当前Flux版本默认不再导出params函数，但ReinforcementLearningZoo的底层代码依赖该函数。只需在实验文件1中显式导入params即可解决：

修改实验文件1的开头代码：

using ReinforcementLearning
using StableRNGs
using Flux
using Flux: params  # 新增此行，显式导入params函数
using Flux.Losses

若后续仍有版本兼容问题，可尝试更新ReinforcementLearningZoo到适配新版Flux的版本，但上述导入操作是最直接的修复方式。另外，若没有CUDA环境，可将model = Chain(...) |> gpu改为model = Chain(...)，切换到CPU运行。

二、Exxx``语法的含义 #

这是ReinforcementLearning包提供的字符串宏，用于简化实验实例的创建：

• EJuliaRL_BasicDQN_CartPole``会自动将下划线分隔的字符串拆解为对应Val类型参数，等价于手动调用：

  RL.Experiment(Val(:JuliaRL), Val(:BasicDQN), Val(:CartPole), nothing)
  

• 该语法的作用是省略冗长的Val参数书写，让实验初始化代码更简洁直观，直接匹配你定义的RL.Experiment方法。

内容的提问来源于stack exchange，提问作者Mike75