- 博客(7)
- 收藏
- 关注
RSS订阅原创 【强化学习】小项目分析：DQN玩游戏2048
DQN玩游戏《2048》用DQN玩小游戏，可分为游戏环境部分和模型部分，最后有源码地址1.《2048》（应该没有人不会玩吧）2048环境python代码操作：上下左右要点：每次都要在空地方随机产生一个新的（2或4）的块块环境奖励机制：1.如果有消去的滑块：+消去滑块的大小（比如32+32变成64，就加64分）2.存活：+1分3.不能移动（即没有消去滑块或产生新滑块）：-5分（需要避免模型陷入死路）4.死局：-202. Q LearningQ表：Q[s, a]记录某状态s下对应的行为
2021-02-11 22:08:54
3637
原创 机器学习考试0.1：基础方法
机器学习基础方法机器学习考点：1. 了解线性回归，贝叶斯分析，决策树，KNN，神经网络，深度学习，强化学习。以上机器学习方法的基本原理和优缺点。2. 了解深度学习中过拟合和欠拟合的常规解决方案。3. 计算题：深度神经网络神经元结点的输出、卷积神经网络的卷积过程和结果。常见基础方法及分析线性回归回归分析是是研究自变量和因变量之间的关系，通常用作预测分析。线性回归是其中的一种，其认为目标和特征呈线性关系，即满足y=w*x+b。预测损失值定义为L=(y-y_)2，目标是最小化L。通常解决方法
2020-12-23 21:19:59
768
原创 数据结构考题汇总(C语言版, 附代码)
数据结构考题本人从严书筛选出的，从热门更新到冷门知识，本人思路是先掌握简单易拿分的项目再去攻克不好拿的。适用于各大高校考研初试复试的数据结构题目。后面会更新面试答题部分。
2020-04-03 14:35:08
9084
5
原创 Java后端面试必会题
Java后端后端真的有好多东西，顾及一边又忽略了另一边，再者后端的要求也越来越高了，所以我总结一下我遇到的问题 首先说下思路，基本上是基础题（基础题好多好多。。。） 然后针对简历上的点进行提出，然后对某些点深入了聊所以要精通一个点，要和面试官聊的非常愉快，就基本稳了(更新：突然发现这图的水印是我的，是我的QQ号)1. SpringQ：为什么使用Spring框架？A：（说好处）spri...
2019-03-01 18:13:37
1100
1
原创 服务框架学习(Extra-1)：服务型消息队列
面向服务的消息队列1. 遇到问题在团队开发时，为了让团队合作更愉快，于是有了RPC(远程方法调用)，可以让两个项目相互使用API时更加友好，因为RPC调用非本地API机制和本地调用一样，无需考虑具体实现。既然RPC特点是“像调用本地方法一样调用远程方法”，在调用之后就要等待返回结果（当然也有异步RPC调用）如果，不希望发送端（消费者）受限于处理端（生产者）的速度时，使用MQ则是一个很好的选...
2019-02-24 14:33:51
236
原创 服务框架学习(二)：远程方法调用(RPC)的原理与实现
远程方法调用1. 概念远程方法调用(Remote Procedure Call)，顾名思义就是调用在其他地方已经实现的方法用图示表示就是：总结一下：消费者在访问对应方法时，把参数（类名，方法名，参数） 发送给生产者代理（可以用Socket），然后传递到生产者的具体实现方法中。生产者通过参数得到返回值后再用同样的方法传递给消费者的具体使用地方。注册服务器当然，大家在网上也看到这样的图（...
2019-02-22 19:50:51
488
原创 服务框架学习(一)：消息队列的原理与实现
消息队列1. 概念消息队列是消息请求的队列，是承载消息请求的队列在实际应用场景中，有队列，发送者和接收者基本的工作原理是：发送者向指定的队列发送消息，该队列让消息入栈，然后当接收者监听指定的队列时，就会接收到来自发送者的消息。2. 简单实现方法消息队列在后端十分有用：应用解除耦合：每次只用一个简单的方法，不需要和其他接口打交道处理异步任务：发送者发布消息后就不用再管了，接受者需...
2019-02-21 23:31:58
1424
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人