- 博客(4)
- 收藏
- 关注
原创 Offline RL 教程
#! https://zhuanlan.zhihu.com/p/341502874Offline RL 教程本教程要求已经对RL有比较基础的了解,至少要知道RL概念(e.g. MDP)以及基本的RL算法(e.g. Q-learning, actor-critic)。本文主要参考Offline Reinforcement Learning: Tutorial, Review, and Perspectives on Open Problems。1. Introduction上图(a), (b)表示了
2021-01-05 00:17:52 1433
原创 Image Pyramid 在深度学习中的使用 (一)--- 何为image pyramid
Image Pyramids目标: 使用表征来分解图片,到不同的scale的图片,来提取特征并且消除噪声。动机: a) 来提取图像的特征,比如多种尺度的边缘b) 减少冗余和图像建模,可以做:图像编码,图像增强和复原,图像分析和合成。c) 当前各种深度网络中都用到了这个,比如[1] [2] [3], 用来做object detection.例子:a)Gaussian Py
2017-04-05 15:14:55 5611
原创 程序设计模式(二)创建型模式
一、一个MAZE的构造过程可以发现MapSite是斜体表示抽象类,有Room, Door, Wall三个子类继承,这三个就是用继承封装了MapSite的多向性。然而一个Maze,就是Room的聚合,所以Maze通过AddRoom方法来添加这些聚合这些Room. 最后通过MazeGame这个类,来构造这个Maze, 也就是帮助Maze这个对象执行它的AddRoom方法,帮Maze传递消息
2017-03-31 22:37:58 541
原创 程序设计模式(一) 基础回顾
一、UML图例说明(1)一个类实例化另一个类的对象 (2)子类继承父类 (3)方法的代码和伪代码说明 (4)一个类对另一个类的引用关系 (5)聚合关系 engine是car中的一部分,同时脱离了聚合体,每个元素可以独立存在。也就是car消亡了,engine还可以在,所以是空心菱形 (6)组合关系 嘴巴是头的一部分,但是没了头,嘴巴也不能单独存在。因此组合体消亡了,元
2017-03-31 22:13:32 347
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人