强化学习环境报错解决

问题：nameerror: name ‘glpushmatrix‘ is not defined  

解决：更换pyglet包的版本。pyglet==2.0a4会报这个错误，把版本换成pyglet==1.5.27即可。

问题：安装了gym和ale-py但是还是找不到模型，报错ModuleNotFoundError: No module named 'ale_python_interface'

解决：原因是gym在某个版本把某些环境剥离了，对于gym==0.19.0和atari_py==0.2.6不会存在这个问题，所以一种方法是回退到这个版本。对于现在的版本gym==0.23.0和stari_py==1.2.2这个版本方法就是手动安装ROMS,参考解决方案1，解决方案2

问题：TypeError: Got an unexpected keyword argument 'labels'

解决：把报错语句中tf.losses.mean_squared_error(labels=q_target, predictions=q)去掉括号里面的labels和predictions，把这句话改成改成tf.losses.mean_squared_error(q_target, q)。

问题：AttributeError: module ‘tensorflow‘ has no attribute ‘Session‘ 

解决：报错原因是你的tensorflow是2.0以上版本，你学习的代码是按照tensorflow版本1.0写的。解决方法就是把tensorflow向下兼容。将sess = tf.Session()改成

       sess = tf.compat.v1.Session()

 问题：AttributeError: module ‘tensorflow‘ has no attribute ‘placeholder‘

解决：原因是tensorflow版本问题，同上。解决方法就是把tensorflow向下兼容。将x = tf.placeholder()改成x = tf.compat.v1.placeholder()。还有一种更简单的方法是在代码开头将improt tensorflow as tf替代为下面的两行代码：

import tensorflow._api.v2.compat.v1 as tf
tf.disable_v2_behavior()

 问题：AttributeError: 'DataFrame' object has no attribute 'ix'

解决：把table.ix[]改成table.loc[]，实现按标签索引。iloc[]是按数字索引。同时注意这里是中括号[]不要在索引的时候写成圆括号()，不然会报错TypeError: __call__() takes from 1 to 2 positional arguments but 3 were given

问题：AttributeError: ‘DataFrame‘ object has no attribute ‘append‘ 

解决：报错原因是新版pandas不支持append。解决方法就是将data = data1.append(data2)改写成data = pd.concat([data1, data2], ignore_index=True) 

易错点：action.all()==0和(action==0).all()不一样