SimonChen

原创 强化学习：7基于直接策略搜索的强化学习⽅法 之 策略梯度

这是强化学习第三篇基于直接策略搜索的强化学习⽅法下的基于策略梯度。

原创 强化学习：2 马尔科夫决策过程

总结无数的学者通过几十年的努力，提出了一套可以解决大部分强化学习问题的框架，这个框架就是马尔科夫决策过程。马尔科夫性 ----> 马尔科夫过程 —> 马尔科夫决策过程马尔科夫性描述的是每个状态的性质，但真正随机过程就是就是就是随机变量序列。若随机变量序列中的每个状态都是马尔科夫的，则称此随机过程为马尔科夫随机过程。UCL David Silver的强化学习课程的笔记，其中有思维导图https://www.meltycriss.com/2017/09/09/note-reinfor

原创 lecture 5:Policy Optimization 1

原创 强化学习环境配置（Ubuntu16.04）---gym、mujoco、mujoco-py、baselines安装与测试

https://blog.csdn.net/Will_Ye/article/details/81087463

原创 在ubuntu下打开.TXT文件，中文显示为乱码

你打开的txt文件2113有可能是GBK编码的，而linux系统用的是UTF－8编码，打开终5261端，进入txt所在的文件4102夹，1653用以下命令iconv -f GBK -t UTF-8 加上文件名如iconv -f GBK -t UTF-8 in.txt就可以在终端看到正常的文件了iconv -f GBK -t UTF-8 in.txt >in2.txt就可以把转换后的内容存入属in2.txt供以后查看...

原创 The package lists or status file could not be parsed or opened.

https://blog.csdn.net/errno/article/details/6407461

原创 Ubuntu中Unable to acquire the dpkg frontend lock (/var/lib/dpkg/lock-frontend)问题的解决

https://blog.csdn.net/shimadear/article/details/90598646

原创 ubuntu无法打开外接硬盘

解决方式如下，运行命令:sudo apt-get install exfat-fuse exfat-utils

原创 has install-snap change in progress问题

以先snap changes，然后再sudo snap abort ID （ID为看到的第一列ID的值）。看到doing或者error状态变为Abort即可。

原创 Ubuntu远程服务器创建新用户并赋予权限

https://blog.csdn.net/u013671245/article/details/80699061

原创 Latex基本表格绘制

https://blog.csdn.net/JueChenYi/article/details/77116011

原创 模式识别：聚类分析2020.05.27class

如果描述模式的特征量为（0,1-特征量，则一般采用 匹配 测度。欧式距离具备 平移 旋转 不变形

原创 聚类分析：1.相似性测度

相似性测度就是为聚类进行服务的，通过相似性测度来进行聚类。一个样本都是一个n维向量，在空间中就是一个点，即坐标，所以两个样本相似就是两个点的距离相近。在正式讲解具体的距离测度方法，这里现讲两种常用的两种运算：欧式距离是最常用的相似性测度方法，但也存在缺陷，就是不同的向量尺度里结果是不一样的，即向量分值的单位不同，如一个是L,另一个是ml，算出来的聚类结果可能是不一样的，可以通过数据归一化处理，减轻这种影响。马氏距离是欧式距离的升级版，克服了欧式距离的缺陷，欧式距离是一种特殊的马氏距离。.

原创 R:matlab交互，数据调用

安装R.matlab包R.matlab包是专门用来处理该r和matlab交互问题的相关包：R语言安装package比较简单，只需要在命令行输入以下即可install.packages(“R.matlab”)使用以下命令进行加载library(R.matlab)读取mat数据文件mat<-readMat(“d:/data/test.mat”)注意路径里的/对读取内容（存放在mat变量中）进行操作（mat变量）s<-mat$sprint(s)注：需要使用R读取的mat文

原创 keras_contrib 安装

安装keras_contribpip install git+https://www.github.com/keras-team/keras-contrib.git

原创 albert生成词向量

等待更新。

原创 BERT生成词向量

等待更新。。。。

原创 Linux下的截图工具：flameshot

sudo apt install flameshot如果你在安装过程中遇到问题，可以按照官方的安装说明[2]进行操作。安装完成后，你还需要进行配置。尽管可以通过搜索来随时启动 Flameshot，但如果想使用 PrtSc 键触发启动，则需要指定对应的键盘快捷键。以下是相关配置步骤：进入系统设置中的“键盘设置”页面中会列出所有现有的键盘快捷键，拉到底部就会看见一个 “+” 按钮点击 “+” 按钮添加自定义快捷键并输入以下两个字段：“名称”： 任意名称均可。“命令”： /usr/bin/flam.

转载 训练集、验证集、测试集详解和极其作用

先用一个不恰当的比喻来说明3种数据集之间的关系：训练集相当于上课学知识验证集相当于课后的的练习题，用来纠正和强化学到的知识测试集相当于期末考试，用来最终评估学习效果

原创 ChineseNER Using LatticeLSTM笔记

https://zhuanlan.zhihu.com/p/42414521

原创 在overleaf中使用中文

使用\usepackage{xeCJK}

原创 Pycharm默认输入状态是insert状态，选中文字无法直接输入替换或删除

大概率是你装了vim插件，在界面的右下方停用就行。

原创 linux指令

每10s刷新GPU占用率：watch -n 10 nvidia-smi

原创 NLP相关学习资料

awesome-sentence-embedding A curated list of pretrained sentence andword embedding modelshttps://github.com/Separius/awesome-sentence-embeddinghttps://separius.github.io/awesome-sentence-embedding/

原创 Non-ASCII character \xe6 in file

出现这个错误，估计应该使用的是python2.x解决办法1： 在代码页加上这一段话# encoding: utf-8或者：# -*- coding:UTF-8 -*-即可解决此问题。

原创 albert_test

import osos.environ['TF_CPP_MIN_LOG_LEVEL'] = '3'import tensorflow_hub as hubimport tensorflow as tfimport tokenizationalbert_module = hub.Module("https://tfhub.dev/google/albert_base/2", trainable=True)print(albert_mod

原创 Ubuntu 18.04LTS系统设置窗口打不开或者消失解决办法

https://blog.csdn.net/ycq521131/article/details/80143372

原创 pycharm使用技巧

pycharm快速定位到 变量或者函数或者类的定义 ctrl + 鼠标左键

原创 PyCharm 中选中一个变量/函数后，所有用到这个变量/函数的地方高亮显示，改配色方案

由于 PyCharm 原来的配色方案里面，选中一个变量/函数后，所有用到这个变量/函数的地方高亮显示得实在太不明显了。所以要改成高亮！找了好久才找到，所以在博客里记录一下，希望对大家有帮助，当然也是防止自己下次再找不到。。。PyCharm > Preferences > Editor > Color Scheme > General > Code > Identifier under caretIdentifier under caret 和 Identifier

原创 Python文档

https://docs.python.org/zh-cn/3/

原创 tensorflow has no attribute logging

AttributeError: module ‘tensorflow’ has no attribute ‘logging’这样是因为tf2里面去掉了这个，目前我采用的方法只是单纯的降级。如果有其他的简单方法，欢迎告知tf.logging was for Logging and Summary Operations and in TF 2.0 it hasbeen removed in favor of the open-source absl-py, and to make the maintf

原创 pip国内镜像

[global]index-url = https://pypi.douban.com/simple/index-url = http://mirrors.aliyun.com/pypi/simple/index-url = https://pypi.mirrors.ustc.edu.cn/simple/index-url = https://pypi.tuna.tsinghua.edu.cn/simple/index-url = http://pypi.mirrors.ustc.edu.cn/s

原创 NVIDIA SMI 无法与 nvidia driver 通信

大致的方案就是重装：https://zhuanlan.zhihu.com/p/89714824https://blog.csdn.net/c2a2o2/article/details/88661375

原创 linux安装nvidia驱动+cuda10.0+cudnn7.4.2

https://www.jianshu.com/p/59b0cbdaa38chttps://blog.csdn.net/liangjiubujiu/article/details/90522899cudnn7.4安装查看https://blog.csdn.net/c19961227/article/details/103381462cuda10.0下载https://developer.nvidia.com/cuda-10.0-download-archive?target_os=Linu.

原创 Linux刚刚安装完anaconda，启动anaconda-navigator

方法一$ source ~/anaconda3/bin/activate root$ anaconda-navigator方法二$ conda install -c anaconda anaconda-navigator​$anaconda-navigator

原创 E: Malformed line 60 in source list /etc/apt/sources.list (dist parse)

E: Malformed line 60 in source list /etc/apt/sources.list (dist parse)E: The list of sources could not be read.解决方法：sudo gedit /etc/apt/sources.list

原创 使用Pycharm将代码同步到GitHub

https://blog.csdn.net/john_bian/article/details/94657057

原创 在 Microsoft word中插入代码

http://www.planetb.ca/syntax-highlight-word

原创 word中图片无法进行无法右击选择“图片格式”

是因为文件处在兼容模式下，转换一下就好

原创 本科毕业论文论文框架，可参考

大致结构，供参考，正文总页数应不少于30页。注意系统的创新点采用面向对象开发方法：（除了致谢中可以出现第一人称“我”，其他正文中一律是本人、本系统）。论文整体要以文字为主，图片、表格、代码是辅助说明的。摘要摘要包括三部分内容：课题背景，课题要研究的内容及实现的功能，完成系统所涉及到的工具和技术。300字左右1绪论 不超过3页；建议包括:(可参考开题报告时的要求)（1）项目的背景（2）项目的意义（3）国内外研究现状（4）研究内容2 开发语言和技术介绍建议不超过4页，内容自定。如：软件开