AWS DeepRace入门及奖励函数简介

1. 新用户会有免费10小时的体验时间；

2. 超过10小时，每小时3.5美金；

3. 存储model需要占用空间，空间也需要一定的费用，占比不大。

费用会从注册的时候绑定的信用卡中扣除，大家要记得及时查询账单。

4.模型创建：奖励函数

=====================================================================

创建模型涉及到的配置大概有三块：

1. Training algorithm and hyperparameters

2. Define continuous action space

3. Reward Function

这就是我们创建模型最重要的部分：编写奖励函数。

可以说DeepRacer实际上就是怎么写好奖励函数（reward function）。

AWS DeepRacer提供了一些可用于编程的函数，详情见：

https://docs.aws.amazon.com/deepracer/latest/developerguide/deepracer-reward-function-input.html

而且AWS提供了一个Example代码，大家可以直接用这个代码作为自己的模型，当然如果要跑出很好的成绩，还是需要利用AWS提供的函数进行一定的分析和优化的。

def reward_function(params):

‘’’

Example of rewarding the agent to follow center line

‘’’

Read input parameters

track_width = params[‘track_width’]

distance_from_center = params[‘distance_from_center’]

Calculate 3 markers that are at varying distances away from the center line

marker_1 = 0.1 * track_width

marker_2 = 0.25 * track_width

marker_3 = 0.5 * track_width

Give higher reward if the car is closer to center line and vice versa

if distance_from_center <= marker_1:

reward = 1.0

elif distance_from_center <= marker_2:

reward = 0.5

elif distance_from_center <= marker_3:

reward = 0.1

else:

reward = 1e-3 # likely crashed/ close to off track

return float(reward)

Example代码我们大致说下思路：

它是根据判断赛车里赛道中心位置的距离来给予不同的奖励。

如果越靠近中心，那么得到的奖励越多。

我们通过这样的策略训练这个模型（比如60mins时间），那么可以得到一个比较理想的能完成比赛的模型，但是时间可能不是最短的。

后面我们会专门针对具体的赛道并提供一个思路来看看怎么创建一个能跑得更快的模型。

下一篇：《AWS DeepRacer re:Invent 2018赛道reward function奖励函数》

欢迎关注我的技术公众号：国民程序员，我们的目标：输出干货

1. 每天分享原创技术文章
2. 海量免费技术资料和视频学习资源
3. 分享赚钱门道，带领程序员走向财务自由
   

学习福利

【Android 详细知识点思维脑图（技能树）】

其实Android开发的知识点就那么多，面试问来问去还是那么点东西。所以面试没有其他的诀窍，只看你对这些知识点准备的充分程度。so，出去面试时先看看自己复习到了哪个阶段就好。

虽然 Android 没有前几年火热了，已经过去了会四大组件就能找到高薪职位的时代了。这只能说明 Android 中级以下的岗位饱和了，现在高级工程师还是比较缺少的，很多高级职位给的薪资真的特别高（钱多也不一定能找到合适的），所以努力让自己成为高级工程师才是最重要的。

这里附上上述的面试题相关的几十套字节跳动，京东，小米，腾讯、头条、阿里、美团等公司19年的面试题。把技术点整理成了视频和PDF（实际上比预期多花了不少精力），包含知识脉络 + 诸多细节。

由于篇幅有限，这里以图片的形式给大家展示一小部分。

网上学习 Android的资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。希望这份系统化的技术体系对大家有一个方向参考。
《Android学习笔记总结+移动架构视频+大厂面试真题+项目实战源码》，点击传送门，即可获取！
，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。希望这份系统化的技术体系对大家有一个方向参考。
《Android学习笔记总结+移动架构视频+大厂面试真题+项目实战源码》，点击传送门，即可获取！