学习笔记
分享IT类书籍的个人读书笔记,主要涵盖深度学习,强化学习方向
johnjim0816
stay hungry, stay foolish
展开
-
我的Hexo-Github博客搭建笔记
从零开始搭建个人博客点击进入我的博客查看效果安装依赖包node.jsHexo是一款基于Node.js的静态博客框架, 所谓巧妇难为无米之炊,要想搭建上层的博客必须先安装底层的node.js,可以直接上node.js官网下载安装,该安装包除了node.js之外还包括node软件包管理工具npm。后面我们需要用npm来安装hexo相关模块,而在国内首先需要像pip那样更换镜像,如下更换为淘宝镜...原创 2020-04-12 10:42:10 · 625 阅读 · 0 评论 -
【机器学习实战笔记】Logistic回归
Sigmoid函数我们想定义一个函数,即能够接受所有特征输入(自变量)然后预测出类别(因变量)。在二分类的情况下,可以定义输出为0和1。比如要预测一个动物是不是鸟类,是则为1,不是则为0。具有这种性质的函数,比较简单的就是单位阶跃函数(Heaviside step function)。但是该函数在x=0x=0x=0处从0瞬间跳变到1,这样就很难处理。换句话讲,阶跃函数在x=0x=0x=0处不可微...原创 2020-04-24 00:32:10 · 341 阅读 · 0 评论 -
【笔记】算法图解
文章目录0 写在前面1 算法简介1.1 引言1.2 二分查找1.3 大O表示法常见的大O运行时间旅行商问题2 选择排序2.1 内存的工作原理2.2 数组和链表2.3 选择排序3 递归3.2 基线条件与递归条件3.3 栈4 快速排序4.1 分而治之4.2 快速排序5 散列表6 广度优先搜索6.1-6.2 图6.3 BFS7 狄克斯特拉算法8 贪婪算法NP完全问题如何判断是否NP完全9 动态规划10 ...原创 2020-03-15 10:52:17 · 397 阅读 · 0 评论 -
深度强化学习第2课|马尔可夫决策过程
文章目录0 写在前面1 简介2 马尔可夫属性3 State Transition Matrix4 MP5 示例:Student Markov Chain6 Markov Reward Process7 Return8 为什么需要衰减?9 MRP的值函数10 贝尔曼方程11 贝尔曼方程的数学表示12 MDP13 Policy14 MDP的值函数15 最优值函数16 最优策略17 寻找最优策略18 贝...原创 2020-03-03 15:01:55 · 2333 阅读 · 0 评论 -
深度强化学习第1课|强化学习入门
文章目录Introduction to Reinforcement Learning by David Silver0 写在前面1 推荐书籍2 入门简介2.1 机器学习2.1 RL的特点2.3 实例3 rewards3.1 奖励假设3.2 举例4 Sequential Decision Making(序列决策制定)4.1 两个基本问题4.1.1 强化学习4.1.2 planning5 agent...原创 2020-03-04 12:26:03 · 879 阅读 · 0 评论 -
【译】The Science of Scientific Writing
科学写作的科学本篇作者是George D. Gopen和Judith A. Swan,最初发表在美国科学家杂志上。0 引言段(1)~(2)重点在于为了更好地提高写作,就得明白读者如何阅读,而不是完全是作者的自娱。 (1)科学很难去解读。多数人认为其困难有一定的必要性,是出于科学概念、数据和分析的极度复杂性。而我们认为不一定只可意会不可言传。本文中列举了一系列修饰原则,它们能够使得科学问题...原创 2020-02-21 18:28:28 · 12307 阅读 · 0 评论 -
The Science of Scientific Writing - 如何科学写作?
0 写在前面《The Science of Scientific Writing》是George D. Gopen和Judith A. Swan最初发表在美国科学家杂志上的一篇文章,意在建议科研工作者或者学生们如何书写论文或文章。文章的一个基本观点就是科学写作的过程就是一个与读者进行沟通的过程。下面笔者将陈述读后感。此外笔者贴出本人结合谷歌翻译的版本,以方便食用此读后感,如下:1 引言开篇...原创 2020-02-21 18:12:38 · 4506 阅读 · 0 评论 -
运动、路径与轨迹三种规划的区别
0 写在前面在研究路径规划问题时,很多人都不知道运动规划(motion planning)、路径规划(path planning)、轨迹规划(trajectory planning)三者的区别与联系,包括很多国内外学者不区分path planning和trajectory planning其实现在研究的主流应该是motion planning问题,它们的区别可以参考stackexchange问...原创 2019-12-03 16:33:37 · 8771 阅读 · 0 评论 -
三维坐标变换习题
最近在做《先进机器人控制》作业,题目如下笔者答案以及python3计算如下#方法一import numpy as np F=np.mat([[0,-1,0,10],[1,0,0,20],[0,0,1,1],[0,0,0,1]])u=np.mat([[3],[2],[2],[1]])v=F*uprint(v[0:3])Ry90_homo=np.mat([...原创 2019-09-23 17:56:05 · 1457 阅读 · 0 评论 -
python3 矩阵相乘操作
网上相关都是方阵相乘,因此看不出来python中行列具体如何表示题目:,求A*B代码如下:import numpy as np A=np.mat([[1,1],[2,1]])B=np.mat([[3],[1]])print(A*B)结果为...原创 2019-09-20 16:02:41 · 2220 阅读 · 0 评论 -
《python crash course》笔记(1)
笔记分为六小节如下:《python crash course》笔记(1):主要包括变量、字符串和列表及其操作等《python crash course》笔记(2):包含列表操作、元组和if语句等《python crash course》笔记(3):包含字典及其操作等《python crash course》笔记(4):包含用户输入以及while循环《python crash c...原创 2019-03-01 05:38:14 · 2177 阅读 · 1 评论 -
《python crash course》笔记(2)
笔记分为六小节如下:《python crash course》笔记(1):主要包括变量、字符串和列表及其操作等《python crash course》笔记(2):包含列表操作、元组和if语句等《python crash course》笔记(3):包含字典及其操作等《python crash course》笔记(4):包含用户输入以及while循环《python crash c...原创 2019-03-01 23:10:15 · 865 阅读 · 0 评论 -
《python crash course》笔记(4)
笔记分为六小节如下:《python crash course》笔记(1):主要包括变量、字符串和列表及其操作等《python crash course》笔记(2):包含列表操作、元组和if语句等《python crash course》笔记(3):包含字典及其操作等《python crash course》笔记(4):包含用户输入以及while循环《python crash c...原创 2019-03-02 18:14:44 · 412 阅读 · 0 评论 -
《python crash course》笔记(5)
笔记分为六小节如下:《python crash course》笔记(1):主要包括变量、字符串和列表及其操作等《python crash course》笔记(2):包含列表操作、元组和if语句等《python crash course》笔记(3):包含字典及其操作等《python crash course》笔记(4):包含用户输入以及while循环《python crash c...原创 2019-03-03 02:08:18 · 580 阅读 · 0 评论 -
《python crash course》笔记(6)
笔记分为六小节如下:《python crash course》笔记(1):主要包括变量、字符串和列表及其操作等《python crash course》笔记(2):包含列表操作、元组和if语句等《python crash course》笔记(3):包含字典及其操作等《python crash course》笔记(4):包含用户输入以及while循环《python crash c...原创 2019-03-03 19:01:14 · 517 阅读 · 0 评论 -
《python crash course》笔记(3)
笔记分为六小节如下:《python crash course》笔记(1):主要包括变量、字符串和列表及其操作等《python crash course》笔记(2):包含列表操作、元组和if语句等《python crash course》笔记(3):包含字典及其操作等《python crash course》笔记(4):包含用户输入以及while循环《python crash c...原创 2019-03-02 05:20:22 · 629 阅读 · 0 评论