Unity：ML-Agent初探

最新推荐文章于 2024-07-10 16:20:37 发布
最新推荐文章于 2024-07-10 16:20:37 发布
阅读量7.4k 收藏 19
点赞数 2
文章标签： Unity AI 机器学习 TensorFlow
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42596388/article/details/80973781
版权

Unity的机器学习项目ML-Agent出来有一阵子了，但之前一直没有接触过，这次我打算利用这篇文章初步熟悉下这个神器，也希望我的分享能给读者带来帮助。

环境篇

安装Anaconda和Python 3

可以从Anaconda官方网站下载安装，并且Anaconda本身就内置Python 3和一些数据科学的库。当然如果追求效率（图省事）也可以像我一样用Visual Studio的安装工具。
安装Anaconda和Python 3
值得一提的是安装完后需要添加一下环境变量的Path，类似这样

C:\Program Files (x86)\Microsoft Visual Studio\Shared\Python36_64
C:\Program Files (x86)\Microsoft Visual Studio\Shared\Python36_64\Scripts

一个是Python的安装路径，一个是路径下的Scripts文件夹。

下载ML-Agent项目代码，并安装依赖库

到ML-Agent的GitHub地址下载项目，这里选择直接下载压缩包。
ml-agent github
下载完后解压打开，会发现python文件夹下有一个requirements.txt文件，记录了所需要的库：

tensorflow==1.7.1
Pillow>=4.2.1
matplotlib
numpy>=1.11.0
jupyter
pytest>=3.2.2
docopt
pyyaml
protobuf==3.5.2
grpcio==1.11.0

这么多库总不能一个个手动pip install吧。别急，用pip install . 命令即可全部安装，其中最后的 .代表全部，不能省略。

现在，我们可以选择在命令行中直接进到...\ml-agents-master\python中，输入pip install . ，或者为了方便环境管理，也可以用Anaconda先建一个环境，然后在环境中安装库。这里选择了后者。

在Anaconda Prompt中用 conda create -n ML-Agent python=3.6 或者在Anaconda Navigator中创建，如图（注意要选3.x版本）。
创建Python环境
打开终端
打开终端
依次输入cd E:\Python\ml-agents-master\python（对应ML-Agent中python文件夹的路径）、:E（上述文件夹的根目录）和pip install .。
安装库
好了，万事俱备，现在可以愉快地开始了。

使用篇

设置并生成工程

用Unity打开...\ml-agents-master\unity-environment，在Example中选择Tennis网球游戏，说是网球，但其游戏规则更类似于羽毛球，双方互相击球，不能让球在己方落地或打出界。
网球游戏
在这个游戏中，会有一个老师和一个学生，我们需要给老师附上预设的模型（...\Assets\ML-Agents\Examples\Tennis\TFModels\Tennis.bytes），来训练学生。

首先将TeacherBrain的BrainType改为Internal，这个时候会发现报错了，点击show me how，可以看到在文档最后给出了解决方案。

原来我们还缺了关键的一环，预设的模型有了，但是在Unity中怎么运行TensorFlow来用这个模型呢？这就要用到TFSharpPlugin.unitypackage 了，这个插件中有Tensorflow Sharp封装成的动态链接库，而后者是Tensorflow的C#版本。导入完后还需如下设置。
Setting
Setting
好，现在我们可以把模型导入到TeacherBrain中了。
Teacher
接下来还需要将StudentBrain的BrainType设为External，才能从外部操控和训练。
Student
然后Build。
Build

训练模型

得到运行程序后，依然是打开终端，进入刚才的python文件夹，输入python learn.py E:\Unity\TennisTrain\TennisTrain.exe --run-id=TennisTrain --train（其中E:\Unity\TennisTrain\TennisTrain.exe是刚才Build出来的程序路径，run-id=TennisTrain则是完成训练后存放的路径，在...\ml-agents-master\python\model 下 ），然后就开始训练了。
训练
训练动图

导入模型并运行

训练得到的模型就保存在...\ml-agents-master\python\model\TennisTrain 下，将其复制到工程中，与之前对TeacherBrain的处理类似，我们将得到的模型导入到StudentBrain中。
Student
然后运行就可以了。

不愧是ML-Agent和TensorFlow，效果拔群。
训练效果

Tesnado
关注
ml-agents项目实践（一）
行者AI
01-06 2849
本文首发于：行者AI 强化学习 (reinforcement learning) 是机器学习和人工智能里的一类问题，研究如何通过一系列的顺序决策来达成一个特定目标。它是一类算法， 是让计算机实现从一开始什么都不懂，脑袋里没有一点想法,，通过不断地尝试， 从错误中学习， 最后找到规律， 学会了达到目的的方法。 这就是一个完整的强化学习过程。这里我们可以引用下方图做一个更直观形象的解释。 Agent为智能体，也就是我们的算法，在游戏当中以玩家的形式出现。智能体通过一系列策略，输出一个行为(Action)从而作
Unity的ml-agent学习
ChangeW fafa的博客
12-04 624
学习资源 精讲blog 0. 导学知识 ML主要包括监督学习、非监督学习和增强学习三种范式 强化学习reinforcement learningpdf电子书 Unity的ml-agent，还必须知道Unity到底怎么玩。玩Unity需要使用C#语言，玩深度学习需要使用Python语言。 ...
ml-agents-master
10-19
unity和python对接的unity包，里面包括完整的文档和环境，当然在github上也可以下载
Unity之ml-agents（一）：环境配置及初步使用
gls_nuaa的博客
02-15 5066
  ml-agents是Unity官方专门用来提供强化学习的工具包，关于ml-agents的介绍不是本文的重点。相比于其他的工具包只需要在package manager中导入，ml-agents需要进行一下简单的配置。这篇文章就对于配置过程及过程中可能遇到的一些问题给予解答。   Unity开源网址：https://github.com/Unity-Technologies/ml-agents   ml-agents的配置有CPU版和GPU版，因为目前GPU并没有提供太多的增益。本篇文章就介绍CPU的配置了
【想要了解Anaconda介绍、安装配置及使用，看这篇文章就够了】
最新发布
.NET学习
07-10 1万+
conda是一个包管理器和环境管理器。我们可以在命令行（Anaconda prompt或终端）中使用它。conda是一个python项目，但它支持多种语言，如Python、R、Ruby、Lua、Scala、Java、JavaScript、C/C++、FORTRAN。为什么要使用conda?conda的作用是解决包管理和环境管理的问题。它可以创建虚拟环境，与主环境分开，方便地在不同环境之间进行切换。conda结合了pip和virtualenv的功能。
ml-agents-0.14.0.zip
02-18
Unity ML-Agents 是 Unity 的机器学习代理工具 The Unity Machine Learning Agents Toolkit (ML-Agents) is an open-source Unity plugin that enables games and simulations to serve as environments for training intelligent agents. Agents can be trained using reinforcement learning, imitation learning, neuroevolution, or other machine learning methods through a simple-to-use Python API. We also provide implementations (based on TensorFlow) of state-of-the-art algorithms to enable game developers and hobbyists to easily train intelligent agents for 2D, 3D and VR/AR games. These trained agents can be used for multiple purposes, including controlling NPC behavior (in a variety of settings such as multi-agent and adversarial), automated testing of game builds and evaluating different game design decisions pre-release. The ML-Agents toolkit is mutually beneficial for both game developers and AI researchers as it provides a central platform where advances in AI can be evaluated on Unity’s rich environments and then made accessible to the wider research and game developer communities.
ML-Agent（Unity机器学习插件）
06-12
https://github.com/Unity-Technologies/ml-agents，Github上可以直接下载，介于国内Github网速太慢，上传一个下载好的。
Unity ML-Agent 训练工业机械臂到达目标点 数字孪生
05-22
使用unity版本为2021.3.0f1 训练时间大概为几十分钟 可以实现在虚拟环境中训练机械臂抓取目标物体 可以修改目标物体出现的范围
从零开始学习Unity插件ML-Agent
qq_33452705的博客
01-26 4097
文章目录环境搭建（Windows10）第一步：安装Unity (2020.3 or later)第二步：安装Anaconda3第三步：搭建Conda环境第四步：下载ml-agents项目代码第五步：配置ml-agents第六步：打开项目 环境搭建（Windows10） 这部分参考知乎专栏文章：https://zhuanlan.zhihu.com/p/82617680 。若是不想看也可直接略过 ml-agents的github安装文档地址 第一步：安装Unity (2020.3 or later) 我安装的是
[Unity3D]ml-agent入门案例
Joseph115的博客
08-26 1634
ml-agent是unity中用于将机器学习算法嵌入到gameobject的一个插件。在我的游戏项目中，我想尝试将机器学习和深度学习算法带入到游戏中，让游戏角色能够利用我们给出的数据自动通关，因此想到尝试使用这个插件。写下这个帖子供也用到mlagent的入门同学进行学习参考。ml-agent的详细内容可以参照官方文档，里面也有详细的英文介绍和入门教程（中文版的维护的并不太好，所以学习主要以英文为主）。 环境搭建 环境搭建主要是安装配置unity以及anaconda，这些教程网络很多，这里不赘述。 ml
unity插件ml-agent的安装和使用
枫闲言的博客
11-12 1897
感觉机器学习将占领游戏AI的趋势和可能性。 Unity Machine Learning Agents (ML-Agents) 是一款开源的 Unity 插件， 使得我们得以在游戏环境和模拟环境中训练智能 agents。 它可以使用 reinforcement learning（强化学习）、imitation learning（模仿学习）、neuroevolution（神经进化）或其他机器学习方...
ml-agents-0.8.1 最新版基于unity的机器学习代理
06-23
ml-agents-0.8.1 最新版基于unity的机器学习代理,如果git上下载不了的朋友可以下载这个
Unity ML-Agents 之 环境配置（Anaconda 下载安装等），简单的搭建场景实现简单训练的Demo（内含详细步骤）.rar
09-01
Unity ML-Agents 之 环境配置（Anaconda 下载安装等），简单的搭建场景实现简单训练的Demo（内含详细步骤） 一、简单介绍 二、工程地址 三、效果预览 四、实现原理 五、涉及命令 六、注意事项 七、环境搭建 Anacoda 的下载 Anaconda 安装 Unity ML-Agents 资源下载 八、Anacoda 中构建 Unity 训练环境 创建环境 在环境中安装 mlagents 九、Unity 中集成 ML-Agents 十、结合 ML-Agents 和 Unity 开始训练 十一、使用训练好的模型，进行演示 十二、关键脚本
ml-agents-0.13.1.zip
03-25
Unity的ml_agent开源资料包
ML-Agents 创建一个新的训练环境 【ML-Agents 官方文档翻译（ML-Agent 1.9.1，Unity 2018-2020）】
FutaAlice的博客
11-18 4109
Making a New Learning Environment 本教程将从头开始创建一个 Unity Environment，以用于训练 Reinforcement Learning（强化学习）Agent。 建议先阅读Getting Started，以便理解构建 Environment 用到的原理。 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ZA9IexFG-1637221255733)(images/mlagents-NewTutSplash.png)] 在本节示例
Unity的机器学习工具包ML-Agents
Peter的博客
12-02 2751
Github下载链接：https://github.com/Unity-Technologies/ml-agentsML-Agents是游戏引擎Unity3D中的一个插件，也就是说，这个软件的主业是用来开发游戏的，实际上，它也是市面上用得最多的游戏引擎之一。而在几年前随着人工智能的兴起，强化学习算法的不断改进，使得越来越多的强化学习环境被开发出来，例如总所周知的OpenAI的Gym，同时还有许多实验室都采用的星际争霸2环境来进行多智能体强化学习的研究。
Unity 机械学习 ML-Agents
weixin_42403848的博客
12-07 546
Unity 官方github主页上ml-agents 文档，传送门是： （插件在正式发布后，文档肯定会放到 https://docs.unity3d.com/Manual/index.html 中） 中文： https://github.com/Unity-Technologies/ml-agents/tree/master/docs/localized/zh-CN 英文： https://github.com/Unity-Technologies/ml-agents/blob/master/docs
Unity 机器学习(ML-Agents) 基础
Maddie_Mo的博客
01-24 8701
Unity 机器学习 ML-Agents 基础Unity 官方示例下载ML-Agents 部分Python 下载AnacondaAnaconda 虚拟环境构建 ML-Agents安装 ML-Agents Python 包安装 ML-Agents 包ML-Agents 入门指南Unity Hub 部分虚拟环境 训练虚拟环境 训练运行：虚拟环境 开始训练：虚拟环境 观察训练进度：虚拟环境 停止训练虚拟环境 恢复训练虚拟环境 训练模型ML-Agents 打造新的学习环境ML-Agents 资产导入 Unity 官
Unity 机器学习 ML-Agents （一）官方介绍概念【必读】
热门推荐
游戏路上的小学生
05-20 2万+
2018.5.20    Unity 官方github主页上ml-agents 文档，传送门是：  （插件在正式发布后，文档肯定会放到 https://docs.unity3d.com/Manual/index.html 中） 中文：   https://github.com/Unity-Technologies/ml-agents/tree/master/docs/localized/zh-CN...
06-12 14:50:14.396 5134 5151 I Unity : False 06-12 14:50:14.396 5134 5151 I Unity : QRCodeScan:Scanning() 06-12 14:50:14.396 5134 5151 I Unity : 06-12 14:50:14.396 5134 5151 I Unity : (Filename: ./Runtime/Export/Debug/Debug.bindings.h Line: 35) 06-12 14:50:14.396 5134 5151 I Unity : 06-12 14:50:14.399 5134 5151 E Unity : NullReferenceException: Object reference not set to an instance of an object. 06-12 14:50:14.399 5134 5151 E Unity : at QRCodeScan.Scanning () [0x00000] in <00000000000000000000000000000000>:0 public void Scanning() { Debug.Log("开始扫描" + webCamTexture==null); if (!webCamTexture.isPlaying) { DeviceInit(); } IsScanning = true; IsScanSuccessed = false; //复位 }
06-13
根据你提供的信息，这是一个 Unity 引擎中的 NullReferenceException（空引用异常）。它表示你在代码中使用了一个空对象，而没有给它赋值。在这段代码中，可能是 webCamTexture 对象没有被正确初始化或者已经被释放...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值