使用Keras和DDPG玩赛车游戏（自动驾驶）

最新推荐文章于 2024-06-28 10:16:26 发布
最新推荐文章于 2024-06-28 10:16:26 发布
阅读量2.6k 收藏 13
点赞数
文章标签： 强化学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_34712925/article/details/81738529
版权
这篇博客介绍了如何利用Keras和DDPG算法在赛车游戏中实现自动驾驶。在Ubuntu16.04环境下，使用特定版本的Keras（1.1.0）和TensorFlow（0.11.0）避免版本不兼容问题。文章详细记录了安装和运行过程中遇到的问题及解决方案，包括keras版本过高、lambda函数和range函数的差异。在代码解释部分，提到了F1-F6用于调整视角，`train_indicator`设置为1可启动训练，训练过程起初较慢，但车辆逐渐学会驾驶技巧。
摘要由CSDN通过智能技术生成

使用keras和DDPG玩赛车游戏

原文见链接
https://www.jianshu.com/p/a3432c0e1ef2
在整个安装运行过程中遇到了很多问题，所以记录下问题和解决方法。安装最好还是按照原文所述，遇到问题可以根据我的解决办法试试。
很多错误都是由于版本不一致导致的，环境版本如下：

  • Ubuntu16.04，python3
  • keras 1.1.0
  • tensorflow 0.11.0

原程序TensorFlow的版本是0.10.0，亲测0.11.0也可以使用，再高的版本就不行了，卸载高版本时务必将一些相关的辅助库一起卸载掉。

问题汇总

from keras.engine.training import collect_trainable_weights
ImportError: cannot import name collect_trainable_weights

这个应该是因为keras版本太高导致的，可以注释掉解决，但还有别的问题，建议安装匹配的版本

最低0.47元/天 解锁文章
黄小慧的博客
关注
Keras深度学习实战（2）——使用Keras构建神经网络
盼小辉丶的博客
04-20 6万+
Keras 是用 Python 编写的高级神经网络 API，它的核心思想在于实现快速实验，该库提供了很多实用工具，可以简化构建复杂神经网络的过程。在本节中，我们将使用 Keras 库构建神经网络，感受 Keras 快速模型构建的特性。.........
Python机器学习之游戏自动驾驶
Celeste的博客
05-11 802
这个项目去年就做了但是一直拖着没写个博客（主要是懒。。），现在开始更新，最终实现效果我已经在B站传了视频，感兴趣的可以去看看 Python机器学习——跑跑自动驾驶_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili ...
【原创】基于DDPG的TORCS自动驾驶训练笔记
qq_39429669的博客
03-11 823
基于DDPG的TORCS自动驾驶训练笔记(一) - 知乎 TORCS首页、文档和下载 - 赛车模拟器 - OSCHINA - 中文开源技术交流社区
python赛车游戏代码,python赛车游戏简易
最新发布
2401_85881957的博客
06-28 652
21~22行：退出程序，()是()函数的一种相反的函数，它运行的代码会使得Pygame库停止工作。41~45行：如果按下了键盘方向键左键，且坐标没有靠近最左边，使其向左移动，否则在窗口最左边不改变。47~50行：如果按下了键盘方向键右键，且坐标没有靠近最右边，使其向右移动，否则在窗口最右边不改变。53~59行：汽车enemy从上向下移动，如果移出窗口，则重新生成一个，位置在顶部，横坐标随机。
Python制作的赛车小游戏源代码，逆行飙车
Python代码大全
10-18 3726
python制作的赛车小游戏，逆行飙车，通过键盘方向键控制。
python赛车游戏开发,python赛车游戏代码
wenangou的博客
08-28 1199
作者自我介绍：大爽歌,。本教程，过程清晰简明，最终。项目代码已上传到我的github:本文分7部分，每一部分最终代码均存到项目仓库下的游戏运行效果，截图如下。
python编写一个赛车游戏
weixin_35750483的博客
12-17 929
好的，下面是一个简单的赛车游戏的例子。这个游戏有一辆赛车和一条跑道，赛车可以向左或向右移动。每次移动后，赛车的位置会更新，并在屏幕上显示赛车的当前位置。游戏结束时，会显示游戏的得分。 首先，我们需要定义赛车类： class RaceCar: def __init__(self, x=0, y=0): self.x = x self.y = y ...
keras-ddpg
飞翔的貅貅的博客
09-24 1349
import os import time import numpy as np import gym import tensorflow as tf from keras.models import Sequential, Model from keras.layers import Dense, Dropout, Input from keras.layers.merge import ...
keras-salient-object-visualisation_道路_keras_模型识别特征热图_驾驶_自动决策_
10-01
它为构建和训练神经网络提供了简洁易用的API，这使得Keras成为实现自动驾驶系统中图像识别任务的理想选择。 在"道路_keras_模型识别特征热图"这个主题中，我们关注的是模型如何在输入的驾驶场景图像上突出显示对...
深度学习中的自动编码：使用TensorFlow和Keras实现自动编码任务
程序员光剑
07-19 4046
作者：禅与计算机程序设计艺术 随着互联网、云计算和大数据技术的飞速发展，以及计算设备性能的不断提升，深度学习越来越受到关注。机器学习中常用的分类、回归和聚类算法在解决图像识别、语音合成等领域已经非常成功，但对于处理更加复杂的问题来说还存在一些挑战。其中一个重要且具有挑战性的问题就是如何处理高维数据。深度学习模型由于能够学习到数据的内在结构
python制作的赛车小游戏源代码，逆行飙车
10-17
python制作的赛车小游戏，逆行飙车，通过键盘方向键控制
DDPG_TF2：KerasTensorflow 2中的简单深度确定性策略梯度算法（DDPG）实现
02-13
DDPG_TF2 很难在TF2中找到简单整洁的DDPG实现，因此我做了一个。 DDPG DDPG是一种无模型的非策略算法，可在连续动作空间中学习Q函数和策略。 它受Deep Q Learning的启发，可以看作是连续acion空间上的DQN。 它利用政策外数据和Bellman方程来学习Q函数，然后使用Q函数来推导和学习政策。 在DDPG的此实现中，一开始执行n次纯探索（由rand_steps参数指定）。 通过在整个范围内均匀分布来选择动作。 主要特点： 随机（深度）模型估计可提供连续（无限）的动作空间。 使用噪声过程（例如， Ornstein–Uhlenbeck过程）进行动作空间探索。 使用经验重播可以稳定地学习以前的经验。 演员和评论家结构 在演员和评论家网络中使用目标模型（通过Polyak平均进行权重转移）。 使用Bellman方程描述每对<状态，动作>的最佳q值函数。
Python项目：赛车
m0_67991177的博客
03-16 2065
我发了，你随意
【Python】Python基于Pygame疯狂赛车游戏设计（源码+报告）【独一无二】
测试开发自动化
04-12 1161
👉博__主👈：米码收割机👉技__能👈：C++/Python语言👉公众号👈：测试开发自动化【获取源码+商业合作】👉荣__誉👈：阿里云博客专家博主、51CTO技术博主👉专__注👈：专注主流机器人、人工智能等相关领域的开发、测试技术。
pygame 入门实例教程 1 - 复古方块赛车游戏
大爽老师的博客
03-02 2814
作者自我介绍：大爽歌, b站小UP主 ，直播编程+红警三 ，python1对1辅导老师 。 本教程步骤明确，过程清晰简明，最终代码量250行上下，适合学习pygame的新手。 项目代码已上传到我的github: https://github.com/BigShuang/simple-brick-games-by-pygame 游戏已录制成视频，投稿至本人b站：点击前往b站观看游戏视频 游戏运行效果，截图如下 〇 - 初始准备工作 本项目使用的python3版本*（如果你
python趣味编程-5分钟实现一个F1 赛车公路游戏（含源码、步骤讲解）
xiaoshun007的专栏
11-18 458
Python 中的 F1 赛道游戏是一款简单的基于图形用户界面的游戏。下面的代码是 pygame 库，是 Python 编程语言的开源模块，专门用于帮助您制作游戏和其他多媒体应用程序。这款 Python 语言的 F1 赛道游戏可以免费下载开源代码，它是为想要学习 Python 的初学者创建的。下面给出了代码，该代码是用于游戏中使用的音频声音的功能。在下面给出的代码中，这是用于游戏中使用的标题的功能。在下面给出的代码中，它用于按钮和文本中使用的颜色的功能。在下面给出的代码中，这是用于游戏中使用的图像的功能。
【Python小游戏】通过这款专为程序员设计的《极限车神》小游戏，你的打字速度可以赢过专业录入员，这个秘密98%的人都不知道哦~（爆赞）
顾木子吖的博客
02-11 2353
哈喽，我是你们的木木子👸！今天小编要为大家介绍一款小编自己用代码码出来的赛车风格的打字小游戏取名暂定为《🚗极限车神🚗》打字小游戏。这款Pygame小游戏在玩法上可以说十分创新，不仅能游戏还能学到很多不同类型的编程代码关键字的语言，比如我就做了这几款类型：Python、Java等。 下面我们就来看一下这款赛车风格打字微信小游戏《🚗极限车神🚗》具体怎么玩吧!
使用Keras构建卷积自动编码器
6. **模型构建**: 使用Keras的`Model`类连接输入和输出层，形成完整的卷积自动编码器模型。 ```python autoencoder = Model(input_img, decoded) ``` 7. **编译模型**: 需要指定损失函数（通常为均方误差，MSE）和...
评论 13
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值