- 博客(35)
- 问答 (1)
- 收藏
- 关注
RSS订阅翻译 [论文阅读]Deep Reinforcement Learning in Continuous Action Spaces: a Case Study in the Game of Simulated
1.摘要：目前越来越多的现实世界中的应用要求agent选择动作在一个连续动作空间，离散动作一个微笑的变化会影响全局，本文模拟环境为一个冰壶游戏。2.Introduction：我们设计了一个深度卷积策略值网络，以冰壶运动为模拟器，冰壶运动的动作空间大，策略复杂。policy输出每个动作的概率分布，value输出最终得分分布[-8,8]。3.Related work：（1）alphago zero：在没有任何手工知识的情况下自行训练，策略和值网络一样，能够加快训练。 （2）博弈树中对持续动作空间，动
2022-04-28 17:23:48
467
原创 【双系统安装】win10+联想thinkpad T14 安装Ubuntu20.04
win10+联想thingpad T14 安装Ubuntu20.04参考：https://blog.csdn.net/ZChen1996/article/details/105817284https://zhuanlan.zhihu.com/p/158363449等等……自己一个记录，自己装的时候没有拍照片，大多引自上面链接的图片1.下载乌班图镜像 https://ubuntu.com/download/desktop2.下载rufus（用来辅助镜像安装）https://rufus.ie/
2022-03-22 14:35:03
4052
原创 [Docker]车辆模拟模型 cityflow安装及挂载、退出
1.cityflow GITHUB：https://github.com/cityflow-project/CityFlow2.cityflow 官方文档：https://cityflow.readthedocs.io/en/latest/cityflow安装：#1.在docker上先拉取该项目docker pull cityflowproject/cityflow:latest2.如图 打开github网址下载文件并解压3.上传到服务器3.将服务器上的文件挂载到该项目上 -如上面的
2021-08-28 12:28:48
2738
1
原创 [python]文件读写操作 exls、txt
1.txt1.1 txt读文件操作with open('test.txt',encoding='utf-8') as txt_obj: line=txt_obj.readline()#一行一行的读取代码 while line: mingzi=line.rstrip('\n').replace('\xa0',' ').split(' ')[1:]#对字符串进行处理操作 print(mingzi) line=txt_obj.readline()
2021-04-30 20:58:42
242
1
原创 [linux]后台挂起和查看日志命令
tips：文件夹下有个文件为general，想要进入该文件夹cd ge 然后按下键盘上的tab可以自动补全目前执行python命令：python3 evaluate.py --input_dir agent --output_dir out --sim_cfg cfg/simulator.cfg后台运行则改为：nohup python3 evaluate.py --input_dir agent --output_dir out --sim_cfg cfg/simulator.cfg >0421
2021-04-21 10:45:02
698
原创 [docker]dockertoolbox 挂载本地目录 共享文件 搭建环境
这里真的是坑 因为我的操作系统是win10家庭版所以下载的docker为dockertoolbox 而网上好多方法是直接在官网下载的docker 所以挂载本地文件一直不成功我要给论文中所提供的代码搭建环境这里以https://github.com/wingsweihua/colight为例1.输入docker pull hzw77/colight:v0.1 命令pull镜像2. 输入 docker images 查看镜像3 将github上的代码拉取下来只需在你想到放代码的文件夹里 右键 gi
2021-02-08 20:35:15
985
原创 [docker]windows10家庭版下dockertoolbox的安装和使用
1 首先可以在设置-系统-关于中查看自己的操作系统版本我的是win10家庭版 所以要装dockertoolbox 专业版等需要去找其他安装教程2 然后打开任务管理器-性能-CPU查看虚拟化是否开启 没有开启需要进入BIOS 开启虚拟化技术如果hyper-v没有关闭的话需要关闭3 安装dockertoolbox ce版本的是免费的http://mirrors.aliyun.com/docker-toolbox/windows/docker-toolbox/安装完之后 桌面会出现如下三个图标
2021-02-08 20:16:43
378
原创 [python][matplotlib]跟莫凡学python3 如何标注解
import matplotlib.pyplot as pltimport numpy as npx=np.linspace(-3,3,50)##将x从-3到3均匀的分成50个点y=x*2+1#函数定义plt.figure()#创建自定义图像plt.plot(x,y)ax=plt.gca()#gca是‘get current axes’的缩写，获取图像的轴ax.spines[‘right’].set_color(‘none’)#将右边和上边的颜色设为空 隐藏ax.spines[‘top’].
2020-12-04 20:53:20
138
原创 [python][matplotlib]跟莫凡学python 画图2
import matplotlib.pyplot as pltimport numpy as npx=np.linspace(-3,3,50)##将x从-3到3均匀的分成50个点y1=x2+1#函数定义y2=xxplt.figure()#创建自定义图像plt.xlim((-1,2))#x和y坐标轴范围plt.ylim((-2,3))plt.xlabel(“i am x”)#x和y坐标轴的标题plt.ylabel(“i am y”)new_ticks = np.linspace(-1,2,
2020-12-04 20:09:19
120
原创 [python][matplotlib]跟莫凡学python 画图代码记录1
import matplotlib.pyplot as pltimport numpy as npx=np.linspace(-3,3,50)##将x从-3到3均匀的分成50个点y1=x2+1#函数定义y2=xxplt.figure()#创建自定义图像plt.plot(x,y1,color=‘red’,linewidth=10.0,linestyle=’-’)#定义x，y以及颜色，线条宽度，表示方式plt.plot(x,y2)plt.xlim((-1,2))#x和y坐标轴范围plt.yli
2020-12-04 19:58:58
115
原创 [linux服务器]部署Django项目在Centos6服务器（Anaconda3+Django）
参照文章：如何部署Django项目在Centos6服务器（Anaconda3+MongoDB+Django）Django项目在Linux服务器上部署和躺过的坑首先anaconda3我已经安装并且已经导入了django依赖包接下来引用第一篇文章1.安装虚拟环境用来跑django安装虚拟环境conda install virtualenv//建立软连接ln -s /root/anaconda3/bin/virtualenv /usr/bin/virtualenv//建立虚拟环境名为mysit
2020-07-24 21:05:34
300
原创 [linux服务器]项目上线流程
因为对如何使用服务器还是很迷惑 所以在慕课网上找了一个课程 此文章为此次课程的记录慕课网课程地址该项目搭建为搭建一个静态web网站 无后台和数据库主要是教学如何把代码放到服务器上并用ip可以访问到准备环境：一台服务器 linux版本 CentOS 64位系统Web服务器 nginx实践步骤：1.购买服务器在阿里云或者腾讯云购买服务器 有学生机还可以优惠 买完之后用 win+r打开命令行输入 ssh root@ip地址打开 输入密码2.Web服务器选择Web服务器有nginx、apac
2020-07-24 14:26:17
684
原创 [Git]使用github合作项目 push代码到远程分支
0.首先添加到本地仓库并提交1.本地新建一个分支2.查看本地分支3.将代码推送到远程分支中去push后面是推送的地址 一起合作开发项目的地址然后是本地分支名：远程分支名
2020-07-20 22:04:30
410
原创 [Linux服务器] anaconda安装
首先阿里云购买了云服务器 Linux版本的CentOS 8.2 64位如何进入Linux服务器后端师兄写的python所以需要在linux系统中安装anacondaanaconda的安装及使用Linux-Centos7下安装Anaconda（2019年新版）先要通过该语句进入base环境conda activate在python里面用pip命令可以装第三方包师兄需要django和cplex 所以用如下命令安装使用如下语句引入...
2020-07-19 15:15:55
228
原创 [git]零基础 git操作push和pull
1.首先需要有github的账号 在github上新建一个github的远程仓库这样会给你一个地址 该地址的意思是将本地的项目push到github上的地址 在第一次push的时候还需要输入github的用户名和密码2. 进行项目的push命令的各个意思为：在一个新的文件夹中进行初始化在本地仓库添加readme文件并提交提交到远程github中去 下方为网址3）再次push文件在该文件夹中写入一个html文件并push到github中去...
2020-07-16 13:28:10
729
原创 [Git] Git的使用 零基础入门
1.git的官方文档（里面附下载地址）地址2.下载git后如何安装可以看网上搜索的教程3.安装后如何操作和配置？git给我的初步理解为是一个代码存储系统，同步远程仓库和本地仓库，且自动备份和恢复因此第一步是创建本地仓库1）在电脑上创建一个文件夹作为你的本地仓库，在当前文件夹的目录下，右击会弹出Git Bash Here，单击该按钮会弹出小黑框2）如下图首先命令为 git init 进行仓库的初始化下方为输入用户名和邮箱，邮箱需要符合邮箱格式，其他没有要求，主要为git来写日志文件时候有一个
2020-07-16 12:18:09
146
原创 [考研复试面试] 计算机相关专业问题
数据结构和计算机网络我单独开了博客这里记录其他的专业课问题1.c和c++的区别c是结构化的语言，更多的是算法的概念。而c++擅长面向对象程序设计，很多函数封装在了库代码中。2.递归函数的优缺点优点：可读性强，代码简单易懂，容易用数学归纳法来证明算法的正确性缺点：运行效率低，占用的时间和耗费的空间都比非递归的函数高。3.离散数学为什么叫离散数学离散数学可以理解为数学和计算机之间的桥梁，离散数学是非常大的一块，包括逻辑，数论，组合数学，图论，算法等领域，还有一些与代数相关的内容。或者说，离散数
2020-05-14 22:36:28
611
原创 [考研复试面试]计算机网络
1.路由器的作用路由器的结构可分为两个部分：路由选择和分组转发。路由选择即根据路由选择协议构造出路由表，定期更新和维护路由表。分组转发即当路由表接收到分组后，根据转发表对分组进行处理，选择一个合适的端口转发出去。隔离广播域和冲突域，节约网络系统资源，提高网络系统畅通率。2 网络层和传输层的作用网络层（1）异构网络互联（2）拥塞控制（3）路由与转发传输层向上面的应用层提供通信服务，为两台主机提供了应用进程的通信，又称为端到端的通信，传输层为数据传输提供可靠的服务。（1）提供应用进程之间的逻辑通
2020-05-14 22:35:51
489
1
原创 [毕业设计]完整的开发一个PC端项目 链接调用 过程
一、毕业设计描述1.1 毕业设计题目增值税多问答表单导办知识系统的设计与研究1.2 毕业设计描述设计一个PC端的系统，类似于税务局填写报表的管理系统。登录电子税务局系统；选择报表进行填写；当对报表中的字段存在疑问时，点击当前页面中的帮助/提问按钮，进行提问。提问可以是多问答有上下文关联的形式。例如：问：xxx字段怎么填？答：请选择你的身份：一般纳税人、小规模纳税人。问：小规模纳税人...
2020-04-23 20:42:20
638
原创 [Web开发]用bootstrap的日期选择器
一个下午都在找插件怎么用，终于弄好后觉得有必要写篇笔记防止下次再浪费时间了参考文章：（他这个并不能用 不过有些传值的方法还是可以学习下的）https://blog.csdn.net/qq_33368846/article/details/82223676官网https://www.bootcss.com/p/bootstrap-datetimepicker/index.htm1.首先引...
2020-04-19 22:13:43
163
原创 [面试] 字节跳动 前端第一次面试 2020校招
面试环境：首先我是在牛客网上投的简历，然后因为2020年疫情的原因，所以面试是在线上展开的。在牛客网上就直接有线上面试的窗口，线上面试一定要找一个安静的环境。1.面试问题首先面试大致会分为四部分：自我介绍，项目基础，现场码代码，最后提一个问题。**1.自我介绍：**自我介绍一般要好好准备，要组织好语言，面试官一般从自我介绍开始找点提问。**2.项目基础：**我自我介绍中有和面试官讲我在校...
2020-04-01 15:51:10
2106
原创 [算法]c++头文件
**1.#include <bits/stdc++.h>**包含了所有的头文件格式：#include<bits/stdc++.h>using namespace std;int main(){ return 0;}
2020-01-12 18:47:50
134
原创 jQuery 实现轮播图实例
1。html+css+js代码<!DOCTYPE html><html><head> <title></title> <style type="text/css"> *{ margin: 0; padding: 0;
2018-08-13 20:57:08
340
原创 jQuery 实现瀑布流布局
就是一些我觉得用jq更加简单的方法用jq又写了一遍，和前面的文章思路什么的都差不多。有些jq封装好的函数更加好用。代码： <!DOCTYPE html><html><head> <meta http-equiv="Content-Type" content="text/html" charset="utf-8" />
2018-08-13 15:35:07
544
2
原创 JavaScript 实现瀑布流布局
1。html+css+js 代码：&lt;!DOCTYPE html&gt;&lt;html&gt;&lt;head&gt; &lt;meta http-equiv="Content-Type" content="text/html" charset="utf-8" /&am
2018-08-11 18:55:26
499
原创 JavaScript 普通计算器 思路分析及代码
1。普通计算器代码实现功能：加减乘除运算功能取小数取相反数清除一位数及运算符全部清除2。界面： 此界面参照oppo r9手机自带计算器的界面3。思路 （1）显示： 显示界面实际为两个框，下方的是showwin，上方的是calwin 用js的字符串拼接将点击的值拼接起来存储在results中，lastkey存储当前鼠标点击的值，然后将results的值放入show...
2018-08-09 18:52:17
5547
转载 JavaScript 知识点总结（4）
1。JavaScript事件调用方式 （1）。在script标签中调用事件var 变量名 = document.getElementById("元素id");//获取某个元素，并赋值给某个变量变量名.事件处理器 = function(){ ……}（2）。在元素中调用<input type="button" onclick="alert('绿叶学习网')"...
2018-08-09 18:00:06
118
转载 JavaScript 知识点总结（3）
1。Math对象的方法max(x,y) 返回x和y中的最大值min(x,y) 返回x和y中的最小值pow(x,y) 返回x的y次幂abs(x) 返回数的绝对值round(x) 把数四舍五入为最接近的整数random() 返回0~1之间的随机数ceil(x) 对一个数进行上舍入floor(x) 对一个数进行下舍入2。window对象方法open()、close(...
2018-08-09 16:28:49
152
转载 JavaScript 知识点总结（2）
1。charAt()方法简介 在JavaScript中，可以使用charAt()方法来获取字符串中的某一个字符。这个方法我们在之前的教程中已经多次接触了。这个方法非常好用，在实际开发中也经常用到。 var str = &quot;Hello lvye!&quot;; document.write(str.charAt(0)+&quot;&amp;lt;br/&amp;gt;&q
2018-08-09 14:19:08
158
转载 JavaScript 知识点总结（1）
主要参考绿叶学习网，便于自身的知识点记忆，因为感觉没有系统学习过虽然看了好多但是自己写起代码来不方便，不过写代码也在于多写吧。大家如果想系统的学习一下，可以看看绿叶学习网，我学习前端大约就是绿叶学习网，慕课网，w3c，菜鸟教程，以及逛逛csdn，不过最主要的还是自己写，光看没有用。1。条件运算符 条件运算符是JavaScript支持的一种特殊的运算符。语法：条件 ? 表达式1 : 表...
2018-08-09 13:51:44
164
空空如也
pytorch loss一直居高不下 GAT+MLP
2021-05-16
TA创建的收藏夹 TA关注的收藏夹
TA关注的人