- 博客(120)
- 收藏
- 关注
RSS订阅原创 Reinforcement-Learning
所以我们现在站在宝藏所处的位置，回头看看我们所走的寻宝之路，离宝藏越近的脚步我们看得越清楚，越远的脚步越渺小很难看清。：通过感官分析所处的环境，直接输出下一步采取的各种行动的概率，然后根据概率采取行动，所以每种动作都有可能被选中，只是可能性不同；ϵ - greedy是用在决策上的一种策略，如ϵ=0.9时，说明90%的情况按Q表的最优值来选择行为，10%的时间使用随机选择行为；SARSA算法在S2这一步估计的动作也是接下来要做的动作，所以现实值会进行改动，去掉maxQ,改为实实在在的该动作的Q值。
2023-07-31 15:53:51
258
1
原创 GULI PART.2
外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-BbPAb95p-1690788312475)(%E8%B0%B7%E7%B2%92%E5%AD%A6%E9%99%A2-%E7%AC%AC%E4%BA%8C%E9%83%A8%E5%88%86.assets/image-20220806165019527.png)]注意，这里选择的是maven项目，而不是spring项目，虽然spring也是一个maven项目，但是创建后需要修改pom文件，所以不太建议去修改pom依赖。
2023-07-31 15:25:39
274
原创 GULI PART.1
后台系统：1、讲师管理2、课程分类管理3、课程管理1.视频管理4、视频信息统计分析5、订单管理6、轮播图banner管理7、权限管理前台系统：1、首页数据的显示2、讲师列表和详情3、课程列表和课程的详情1.课程详情2.课程观看3.课程评论4、登录和注册1.微信扫码登录5、微信扫码支付MyBatis 是一款优秀的持久层框架，它支持自定义 SQL、存储过程以及高级映射。MyBatis 免除了几乎所有的 JDBC 代码以及设置参数和获取结果集的工作。
2023-07-31 15:25:02
309
原创 Mybatis
文章目录MyBatis1、概述1.2、特性1.3、安装1.4、对比2、搭建Mybatis2.1、创建一个Maven项目2.2、然后使用project structure确定java版本2.3、setting>build->build tools>maven，配置maven仓库、镜像、目录2.4、设置打包方式（子模组）2.5、引入驱动依赖2.6、创建测试用表2.7、创建对应实体类2.8、创建mybatis的核心配置文件添加关键配置2.9、创建用户接口2.10、创建Mybatis的映射文件2.
2023-07-31 15:22:50
1980
原创 SpringMVC
文章目录SpringMVC1、概念SpringMVC特点2、创建一个SpringMVC配置web环境导入依赖配置web.xml创建视图创建请求控制器需要注意的问题3、将Spring配置文件移入resources中可能会遇见的问题4、@RequestMappingvaluemethodparamsheaderant风格路径5、路径占位符6、SpringMVC获取请求参数6.1、通过ServletAPI获取6.2、SpringMVC中提供的Servlet封装@RequestParamvaluerequiredd
2023-07-31 15:22:08
675
原创 SSM整合
在使用注解处理的时候，需要注意一点，web服务器启动的时候，spring-mvc.xml会优先于spring.xml启动，如果工程整包被扫描，那么service会优先于事务先启动，这样就导致事务无法注入管理，所以这里只能扫描mvc包，然后在spring.xml文件中扫描service包，这样就是先启动spring的事务管理注入，再注入service，最后注入controller，这个时候，事务才进入了spring 的IOC管理。：这里的pojo对象需要数据库对应的表结构。service**的包。
2023-07-31 11:30:45
70
原创 MySQL Streamlined Study Notes
文章目录常见的错误问题常用命令SQL语句的分类查询DQL语句查询一个字段查询多个字段给查询列起别名列参与数学运算条件查询排序数据处理函数分组函数去重连接查询内连接之等值连接内连接之非等值连接内连接之自连接外连接多张表连接子查询from中的子查询select后面出现的子查询union合并查询结果集limit（非常重要）DQL总结DDL语句建表数据类型快速建表将查询结果插入到一张新表快速删除表中数据对表结构的增删改DML语句插入数据insert插入多条数据date和datetime修改update删除dele
2023-07-29 09:50:51
1082
原创 Linux高并发服务器-第二部分
数据链路层协议-以太网帧协议-MAC地址封装网络接口层协议-ARP协议封装传输层，把TCP/UDP的数据加到头部，再把应用数据一起加进来封装，其他层以此类推分用网络通信的过程假如一台电脑的QQ要往另一个电脑的QQ发消息，应用层包含消息数据，还得包含QQ的协议头，这两进行封装，之后往下进行传输假如使用UDP进行传输，需要有16位的源端口号，16位目的端口号，16位的UDP长度，16位的UDP检验和以及数据，所以就得在上层应用层的基础上加入这些上一层封装的内容作为下一层的数
2023-07-29 09:10:27
765
原创 Spring
Spring框架1、概念https://blog.csdn.net/qq_33369905/article/details/106647330https://blog.csdn.net/qq_33369905/article/details/105828924?spm=1001.2014.3001.5502SpringFrameWorkSpring基础框架,可以视为Spring基础设施，基本上任何其他Spring项目都是以Spring Framework为基础Spring Framewor
2023-07-29 08:57:47
467
原创 RESTful
RESTful什么是RESTful?REST:Representational State Transfer，表现层资源状态转移RESTFUL是一种网络应用程序的设计风格和开发方式，基于HTTP，可以使用XML格式定义或JSON格式定义。RESTFUL适用于移动互联网厂商作为业务使能接口的场景，实现第三方OTT调用移动网络资源的功能，动作类型为新增、变更、删除所调用资源。本质：是一种软件架构风格核心：面向资源设置apiRESTFUL特点包括：1、每一个URI代表1种资源；2、客户端使用
2023-07-29 08:56:45
119
原创 Linked List
补充知识typedef给类型换名字，比如或者来一个结构体指针定义。离散存储离散的含义，任何一个点到其他点之间是有间距的。n个节点离散分配，彼此通过指针相连接，每个节点只有一个前驱节点，每个节点只有一个后继节点，首节点没有前驱节点，尾节点没有后继节点。确定一个链表需要几个参数？首节点可以通过头结点推出来，所以不是必须的，尾指针是0，因为没有后继节点，所以尾指针也不是必须的。尾节点也不是必须的，找到最后空的就知道尾节点，所以也不是必须的。头指针包含了指向头结点的地址，所以头结点也不是必须的，记下头指针
2023-07-28 09:47:59
745
原创 Stack
在静态内存当中分配的叫做栈，在动态内存中分配的叫做堆。**红色椭圆圈当中的就是在栈中分配的，蓝色下划线的就是在堆里分配的。**栈和堆表示的是分配数据的一种方式。静态局部变量是通过压栈和出栈来分配内存的，而动态变量是通过堆排序的方式来分配内存。所以，栈是一种可以实现“先进后出”的存储结构，栈类似于箱子（有底）。以数组为最基本的内核。不连续，其内核是链表（不允许尾部插入尾部删除）。最常用的是动态栈。压栈和出栈。push&pop初始化后的栈：push的操作判断栈是否为空，则看pTop与pBottom是
2023-07-28 09:47:31
116
原创 queue
一种可以实现“先进先出”的存储结构。并且只允许一端入，另一端为出。而且不能对中间的元素进项进行插入删除。栈是先进后出。且只允许在一端插入与删除，就是入口与出口都是同一个。对链表进行一些操作和限制，就成了队列。在栈当中，头部尾部的代号是Top和Bottom；队列当中，头部尾部的表达式是front和rear。用数组实现，定义头部与尾部之后，也可以实现队列，即把数组的一些功能砍掉，再增加一点队列的功能。静态队列都必须是循环队列。需要搞懂：如果f指向第一个元素，r指向最后一个的话，不好操作，参考链表，链表的第一个
2023-07-28 09:47:11
227
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人