自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

原创 ubuntu自动提醒

文章目录notify-send是系统自带的工具,用于在桌面弹出提醒弹窗,使用方法:NAMEnotify-send - a program to send desktop notificationsSYNOPSISnotify-send [OPTIONS] [body]DESCRIPTIONWith notify-send you can sends desktop notifications to the user via anotification daemon from the co

2020-07-18 19:35:17 13

原创 GIT的基本操作(建立自己的git远程仓库)

文章目录先在远程主机建立git仓库进入git仓库,建立不用更新的文件(.gitignore)git操作远程克隆到本地本地建立新文件后提交本地仓库推到远程仓库本地仓库更新查看当前仓库状态查看当前提交的日志回滚查看所有提交的日志删除仓库文件创建ssh秘钥先在远程主机建立git仓库git init --bare xxx.git建立一个用户用来管理gituseradd gitpasswd git进入git仓库,建立不用更新的文件(.gitignore)vim .gitignore# pycha

2020-06-21 12:09:32 76

原创 ubuntu系统静态路由

文章目录在路由器上设置本电脑的静态ipsudo vim /etc/network/interfacesiface eth0 inet staticaddress x.x.x.x #地址 192.168.0.10netmask x.x.x.x #掩码 255.255.255.0gateway x.x.x.x #网关 192.168.0.1network x.x.x.x #网络号 192...

2020-03-03 17:45:23 70

翻译 强化学习-Vanilla Policy Gradient(VPG)

文章目录BackgroundQuick FactsKey EquationsExploration vs. ExploitationPseudocodeDocumentationReferancesBackground策略梯度背后的关键思想是提高导致更高回报的操作的概率,并降低导致低回报的操作的概率,直到获得最佳策略。Quick FactsVPG 是一个on-policy算法VPG 能...

2020-01-26 11:42:41 659

翻译 Soft-Actor-Critic-强化学习算法

文章目录BackgroundQuick FactsKey EquationsEntropy-Regularized Reinforcement LearningSoft Actor-CriticExploration vs. ExploitationPseudocodeDocumentationBackgroundSAC算法,它以off-policy方式优化随机策略,从而在随机策略优化和DDP...

2020-01-26 11:29:37 565

翻译 Twin Delayed DDPG(TD3)-强化学习算法

文章目录BackgroundQuick FactsKey EquationsExploration vs. ExploitationPseudocodeDocumentationBackground尽管DDPG有时可以实现出色的性能,但它在超参数和其他类型的调整方面通常很脆弱。 DDPG的常见故障模式是,学习到的Q函数开始显着高估Q值,然后导致策略中断,因为它利用了Q函数中的错误。 双延迟DD...

2020-01-22 23:12:44 1133

翻译 PPO-强化学习算法

文章目录Quick FactsKey EquationsExploration vs. ExploitationPseudocodeDocumentatonPPO受到与TRPO相同的问题的激励:我们如何才能使用当前拥有的数据在策略上采取最大可能的改进步骤,而又不会走得太远而导致意外导致性能下降? 在TRPO试图通过复杂的二阶方法解决此问题的地方,PPO是一阶方法的族,它使用其他一些技巧来使新策略...

2020-01-22 20:46:42 602

翻译 DDPG-强化学习算法

文章目录BackgroundQuick FactsKey EquationsDDPG的Q-learning部分DDPG的策略学习部分Exploration vs. Exploitation(探索vs.利用)DocumentationReferencesWhy These Papers?BackgroundDDPG是一种同时学习Q-函数和策略的算法。它使用off-policy的数据以及bellm...

2020-01-22 15:20:26 403

转载 强化学习核心文章一百篇

文章目录1. Model-Free RLa. Deep Q-Learningb. Policy Gradientsc. Deterministic Policy Gradientsd. Distributional RLe. Policy Gradients with Action-Dependent Baselinesf. Path-Consistency Learningg. Other Di...

2020-01-21 13:57:26 182

翻译 Policy Optimization-强化学习业界手册

文章目录Deriving the Simplest Policy Gradient1.轨迹的概率 (Probability of a Trajectory)2.对数导数技巧3.轨迹的对数概率4.环境函数的梯度5.轨迹的梯度对数概率综上所述,我们得出以下结论:Implementing the Simplest Policy Gradient1.建立策略网络2.构建损失函数3.运行训练的一个Epoch...

2020-01-21 13:39:23 155

原创 强化学习基础

文章目录强化学习基础概念MP策略π\piπRewardState Value functionState Value Bellman equationState-Action Value functionState-Action Value Bellman equationLook ahead最优值函数Greedyϵ\epsilonϵ-greedysoftmax强化学习算法有模型动态规划无模型基于...

2020-01-04 13:56:19 74

原创 PolicyGradientMethods-强化学习

文章目录Neural network as ActorGradient AscentMonte Carlo Policy GradientAdd a BaselineCriticActor-CriticTipsA3CPathwise Derivative Policy GradientNeural network as Actor用一个Actor(Policy)玩游戏,在一个episode中...

2019-12-26 15:35:39 48

原创 linux内网穿透局域网frp(实现有网就能访问你的局域网台式机服务器)

一.初衷一个在家里放服务器搞量化投资的个人玩家,必须得实现内网穿透实现实时监控.(想从任何地点都能访问你的任何主机)二.前奏买一个公网ip的主机(我买的是阿里云的,为了防止我这是做广告,请买别的服务器),获得公网主机ip: x.x.x.公一台局域网主机,ip: x.x.x.私下载好frp. 地址https://github.com/fatedier/frp从release中找到适...

2019-08-30 14:10:47 155

原创 Centos7 install firefox-china

文章目录downloadextractionmake a desktop shortcutdownloadextractionsudo tar xvf firefox-xxx -C /opt/make a desktop shortcutcd /usr/share/applications/vim firefox.desktop[Desktop Entry]Version=1....

2019-06-20 22:03:55 41

原创 CentOS7 install google-chrome-stable

文章目录download the rpm pkg of google-stabledependenciesinstallation of google-chromecd /etc/repos.d/download the rpm pkg of google-stablehttps://dl.google.com/linux/direct/google-chrome-stable_curre...

2019-06-20 21:16:07 1042

原创 CentOS7 Change the Sources of yum(刚装完centos后一定要干的事)

文章目录when you complete the installation of CentOS7when you complete the installation of CentOS7rm -f /etc/yum.repos.d/CentOS-Base.repowget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun...

2019-06-20 20:46:15 137

原创 ubuntu18.04安装gcc7.3.0&g++7.3.0

代码sudo apt-get updatesudo apt-get install aptitudesudo aptitude install gccsudo apt install gccsudo apt-get install g++若显示如下则成功gcc --versiong++ --version

2019-05-21 21:31:00 5825 4

翻译 如何使用CSDN- Markdown编辑器(给自己看的)

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...

2019-05-21 21:17:30 40

原创 ubuntu安装VMware workstation pro 15

文章目录下载安装下载https://my.vmware.com/cn/web/vmware/info/slug/desktop_end_user_computing/vmware_workstation_pro/15_0安装sudo ./VMwarexxxx.bundle

2019-05-17 17:28:41 445

翻译 java学习笔记

文章目录第一章介绍下载环境搭建写程序第二章Java中的数据类型Java中的自动类型转换Java中的强制类型转换Java常量第三章.运算符运算符的优先级第一章介绍下载javaSE地址:www.oracle.com/technetwork/java/javase/downloadseclipse:MyEclipse:www.my-eclipse.cn环境搭建写程序第二...

2019-04-17 00:06:28 511

原创 ubuntu安装java&hadoop

文章目录准备安装包准备工作创建hadoop用户设置hadoop密码为了以后方便,装个vim编辑器安装SSH并配置SSH无密码登录安装java安装HadoopHadoop伪分布式配置配置core-site.xml配置$hadoop-env.sh$配置hdfs-site.xml执行NameNode的格式化开启NameNode和DataNode查看准备安装包java安装包https://www....

2019-04-11 12:20:04 211

翻译 贝叶斯分析-学习笔记(超干的干货)

文章目录第一章.绪论第二章.先验分布的选取2.1主观概率2.1.1 主观概率的定义定义2.1.1 主观概率2.1.2确定主观概率的方法1.对事件进行对比确定相对似然性2.利用专家的意见3.利用历史资料2.2利用先验信息确定先验分布2.2.1 直方图法2.2.2 相对似然法2.2.3 选定先验密度函数的形式,再估计超参数.2.2.4 定分度法和变分度法2.3利用边缘分布$m(x)$确定先验分布2.3...

2019-04-10 17:36:49 116

原创 利用ssh传输文件

文章目录下载文件上传文件scp方法下载文件scp -P servername@IP:/serverpath/file /hostpath/dir/其中servername为登录服务器的用户名,IP为服务器的IP,serverpath为需要下载的文件路径,file为文件名,/hostpath/dir/为本地存放路径上传文件scp -P /hostpath/dir/file servern...

2019-04-03 19:16:45 512

原创 笔记本安装ubuntu后触控板失灵

文章目录很奇妙查看history的时候有以下操作:114 sudo modprobe -r psmouse115 sudo modprobe psmouse proto=imps116 sudo vim /etc/modprobe.d/options117 sudo add-apt-repository ppa:yannubuntu/boot-repair && ...

2019-04-03 11:48:04 247

翻译 pycharm快捷键

2019-03-09 17:31:04 28

原创 源码安装sip&pyqt4 for ubuntu,anconda3,python3

文章目录下载sip编译安装sip下载pyqt4编译安装pyqt4导入包下载siphttps://www.riverbankcomputing.com/software/sip/download编译安装sip假设下载路径是~/Download/cd ~/Download/tar zxvf sip-xxx.tar.gzcd sip-xxxsudo ~/anaconda3/bin/py...

2019-03-08 19:28:22 196

翻译 DeepLearning.AI第一部分第四周:深层神经网络

文章目录

2019-03-07 10:10:43 333

翻译 Qt学习

文章目录布局label控件button控件的使用实现button与lebel联动控件信号与槽布局四种布局label控件主要目的为了显示信息可以发射信号,配合槽函数实现特定功能可以修改样式表,显示图片button控件的使用主要用于用户提交, 确认等情况需要有事件处理函数实现特定功能实现button与lebel联动点击按钮,改变lebel显示内容控件信号与槽...

2019-03-06 17:54:27 26

原创 打包python程序

文章目录python程序的缺点python程序打包早期的python打包工具使用pyinstaller工具python程序的缺点解释性语言, 容易暴露源程序脱离解释器后, 不容易运行python程序打包能够隐藏源码, 保护核心技术和知识产权便于发布程序可以脱离python环境在任意电脑上执行早期的python打包工具py2exe智能在Windows平台打包不能打包为...

2019-03-04 16:11:23 368

原创 ubuntu安装qt4

文章目录更新源安装qt更新源最好用清华的源,比较快$sudo apt-get update安装qt$sudo apt-get install qt*

2019-02-28 18:40:29 526

翻译 DeepLearning.AI第一部分第三周、 浅层神经网络(Shallow neural networks)

文章目录3.2神经网络的表示Neural Network Representation3.2神经网络的表示Neural Network Representation下面是一张神经网络的图片,现在给此图的不同部分约定一些名字图3.2.13.2.13.2.1有一个个体,属性值为:x1,x2,x3x_1,x_2,x_3x1​,x2​,x3​,输入层:即&amp

2019-02-24 10:48:24 123

转载 ubuntu下载百度网盘文件油猴+aria2

文章目录一、firefox油猴导出下载插件二、安装aria2三、配置aria2启动服务监听一、firefox油猴导出下载插件很简单自己搜。也可以用firefox的插件,一大堆二、安装aria2sudo apt-get install aria2sudo mkdir /etc/aria2 #新建文件夹 sudo touch /etc/aria2/aria2.session #新建ses...

2019-02-23 12:11:15 1011

转载 python的进程模块

进程与线程假如有两个程序A和B,程序A在执行到一半的过程中,需要读取大量的数据输入(I/O操作),而此时CPU只能静静地等待任务A读取完数据才能继续执行,这样就白白浪费了CPU资源。是不是在程序A读取数据的过程中,让程序B去执行,当程序A读取完数据之后,让程序B暂停,然后让程序A继续执行?当然没问题,但这里有一个关键词:切换。切换,那么这就涉及到了状态的保存,状态的恢复,加上程序A与程序B...

2019-02-20 13:04:34 82

原创 win8.1平板安装ubuntu16.04的折腾

文章目录下载好ubuntu16.04.5刻录镜像买个otg外接多接口hub可以连接键盘和u盘开机狂按ESC进入bios进入grub界面不拔掉U盘安装好之后重启进入liveCDOK进入ubuntu系统下载好ubuntu16.04.5在清华镜像查找‘ubuntu’即可选择64位的地址:https://mirrors.tuna.tsinghua.edu.cn/ubuntu-releases/16....

2019-02-20 13:03:05 2162 5

转载 ubuntu安装百度网盘

文章目录一、下载地址二、安装三、ok一、下载地址bcloudhttps://pan.baidu.com/s/1HBu5T3PZ8JsS93PgOKnUYw二、安装$sudo dpkg -i bcloud_3.9.1_all.deb安装不成功就运行下面这句更新依赖包$sudo apt-get -f install$sudo dpkg -i bcloud_3.9.1_all.deb...

2019-02-20 12:05:22 1141

原创 apt-get update碰到错误

文章目录问题解决办法尝试更新apt-get问题Err:10 http://dl.google.com/linux/chrome/deb stable InReleaseCould not connect to dl.google.com:80 (6.6.6.6), connection timed outFetched 576 kB in 2min 0s (4,788 B/s)AppSt...

2019-02-20 11:57:19 402

原创 ubuntu修改mongodb的数据库储存位置

文章目录复制更改datadir储存路径转移datadir给权限和所有者重启mongodb启动mongo查看复制$sudo cp /原来的mongodb文件夹路径如果是默认安装,该配置文件路径可以在/etc/mongodb.conf下找到 “原mongodb数据存储路径”vim /etc/mongodb.conf如果不是,用locate mongodb.conf找到并查看原datadi...

2019-02-19 22:02:56 2936

转载 ubuntu16.04引导修复不能开机、grub丢失等——这是一剂良药

我的电脑是window+ubuntu系统。1.制作一个U盘启动盘。下载对应的ubuntu系统,用UltraISO制作Ubuntu U盘启动。2.打开电脑后选择u盘启动盘,然后选择try ubuntu without install。试用不安装。3.进入ubuntu系统后,连接好网络,打开终端,输入下面命令,按照提示操作。3.1$sudo add-apt-repository ppa:...

2019-02-19 16:36:05 4670

原创 ubuntu16.04安装Virtualbox

文章目录下载安装下载Virtualbox官网地址: https://www.virtualbox.org/wiki/Linux_Downloads$cd ~/Download$wget https://download.virtualbox.org/virtualbox/6.0.4/virtualbox-6.0_6.0.4-128413~Ubuntu~xenial_amd64.deb安...

2019-02-01 19:41:28 275

原创 lesson7 集合set

文章目录概念作用:去重,关系运算,可变类型和不可变类型的定义:集合定义:主要方法:1、长度len2、成员运算in和not in3、"|" 合集4、&交集5、"-"差集6、 "^"对称差集7、==8、父集:>,>=9、子集:<,<=其它方法set的方法和object的方法set的独有方法()

2019-01-27 17:54:22 61

提示
确定要删除当前文章?
取消 删除