- 博客(42)
- 收藏
- 关注
RSS订阅转载 Missing keys & unexpected keys when loading self trained model
当参数名称不匹配时，修改load model 参数参数名称
2023-01-04 20:49:23
325
原创 VSCode远程开发 Resolver error: Error: Failed to install the VS Code Server
VSCode远程连接错误
2022-12-12 18:43:20
1837
原创 pytorch distribute all_reduce方法实验
Distributed communication package - torch.distributed — PyTorch 1.10.0 documentation 变量 结果 实验1 两个process不同次数的all_reduce process1调用结束后会关闭端口，process2会报错 实验2 两个process不同次数的all_reduce，调用次数少的那个process,调用time.sleep process1 的all_reduce连接会
2021-12-06 16:02:42
4904
原创 pytorch 中 nn.CrossEntropyLoss 理解
在看代码的时候。发现输出未经过softmax的值直接送入CrossEntropyLoss。觉得这里有问题。https://zhuanlan.zhihu.com/p/98785902sum up:1.torch的crossEntropy里三个过程1.softmax，2.取log，3.NLLLoss 取label位置上那个log值取均值(是否取均值可由参数设置)。2.如果logit不经过softmax的话，直接取交叉熵的影响：因为交叉熵是取label=1位置上的logx。x>0，1.log
2020-05-25 11:58:38
648
原创 pycharm 远程服务器同步提示Permission denied问题
现象：上传或下载文件提示Permission denied；服务器chmod 766 -R ***,上传 文件后提示Failed to change timestamp of the file ；之后无法 再次上传文件，服务器文件权限被更改；解决：修改时间不同步https://blog.csdn.net/xu380393916/article/details/1050625...
2020-04-30 15:20:44
4609
原创 ssh 远程服务器docker无法登陆
安装网上教程配置好docker以及相应的ssh服务后，连接不成功。进入dockerdocker run -ti -p 3333:33 --name test1 deepscale:10.0 /bin/bash服务器自己连接docker 报错：根据文章：https://www.jianshu.com/p/9dbb1dea5929在docker中监听服务器的33端口，/us...
2020-02-25 17:04:51
1159
原创 过拟合和欠拟合
1. 过拟合和欠拟合欠拟合 (underfitting) : 模型无法得到较低的训练误差过拟合 (overfitting) : 模型的训练误差远小于它在测试数据集上的误差模型越简单, 容易欠拟合, 模型越复杂, 容易过拟合 训练数据越少越容易过拟合2. 过拟合解决方法2.0增大训练集2.1 权重衰减权重衰减等价于 范数正则化 (regularization) . 正...
2020-02-19 20:31:11
209
转载 self-attention and transformer
https://zhuanlan.zhihu.com/p/469900101. Attention机制Attention用于计算"相关程度", 例如在翻译过程中，不同的英文对中文的依赖程度不同，Attention通常可以进行如下描述，表示为将query(Q)和key-value pairs映射到输出上，其中query、每个key、每个value都是向量，输出是V中所有values的加权...
2020-02-17 22:45:39
197
原创 伯禹task1-2
task1:线性回归 模型 为了简单起见，这里我们假设价格只取决于房屋状况的两个因素，即面积（平方米）和房龄（年）。接下来我们希望探索价格与这两个因素的具体关系。线性回归假设输出与各个输入之间是线性关系: price=warea⋅area+wage⋅age+bprice=warea⋅area+wage⋅age+b 数据集 我们通常收集一系列的真实数据，例如多栋房屋的真实售出价...
2020-02-14 20:10:44
75
原创 pytorch 多GPU并行计算
并行计算分为两类：https://baijiahao.baidu.com/s?id=1632494497660364845&wfr=spider&for=pc模型并行：将模型的多个层放到不同的机器上， 数据并行（常用）：将数据分发的不同机器上基于pytorch的并行计算1.单机多gpu ：https://www.jianshu.com/p/b366cad90a6c...
2020-02-10 16:23:15
1318
1
原创 win10 WSL下安装dockers
再ubuntu16下直接按照命令行安装后https://docs.docker.com/ee/docker-ee/windows/docker-ee/$docker run hello-world 提示 docker is not run即使$sudo service docker start$sudo service docker status 也提示docker is...
2020-01-10 13:42:43
209
原创 特征选择
西瓜书 11章总思想：子集搜索+子集评价 子集搜索：前向搜索：第一轮：假定{a1}最优，第二轮，{a1,a2}优于{a1},... 后项搜索：第一轮：假定{a1..ak}最优，第二轮{a1,...ak-1}优于第一轮结果 双向搜索：前向+后向 穷举搜索； 子集评价：在子...
2019-12-02 10:21:49
83
转载 内存管理
转自blog: https://www.cnblogs.com/ralap7/p/9184773.html 目的: 资源最大化利用,计算机内存都是有限的,如何在有限的内存空间运行更多更大的程序？通过控制所有对象的生命周期,从而减少内存的占用,让程序之后不使用的对象释放自己的内存空间 进程如何使用内存 进程用来存放从磁盘载入的程序代码，或是存放取自用户输入的数据等 对任...
2019-04-20 11:25:32
87
原创 c++ 栈解退
栈解退:try 没有直接调用引发异常的函数,而是调用了函数A,函数A调用函数B,函数B异常,则程序流程将丛函数B跳到try块和处理程序的函数. 函数 通常返回到调用它的函数. throw-catch语句将控制权返回到第一个这样的函数:包含能够捕获这种异常的try-catch组合;...
2019-03-27 22:13:36
495
原创 Kolmogorov-Smirnov 和Adversarial Validation
目的：判断test和train分布是否相同，由此判断交叉验证是否能满足要求。方法：train和test数据和在一起，train标记为0.test标记为1。 训练一个分类器，如果该分类器可以很好的将test和train分开，说明train和test分布差异较大。 如果分类器不能很好的将train和test分开（auc=0.5），说明train和test分...
2019-03-23 12:00:43
141
转载 平均值编码
https://zhuanlan.zhihu.com/p/26308272 针对高基数定性特征（类别特征）的数据预处理 一般情况下，针对定性特征，我们只需要使用sklearn的OneHotEncoder或LabelEncoder进行编码 OneHotEncoder：则能通过哑编码，制作出一个m*n的稀疏矩阵 LabelEncoder ：能够接收不规则的特征列，并...
2019-03-20 22:25:41
1819
原创 C++ 第10章总结
1.void show() const;这种方式声明和定义的类函数被称为const成员函数，只要类方法不修改调用对象，就应将其声明为const。例如const Stock land("stock1") ;//声明类Stock对象 land;land.show()//如果 show没有被被声明成const成员函数，编译会报错，因为不知道show是否会修改参数；2.所有对象共享一个常量...
2019-03-12 14:25:52
76
原创 C++名称空间
//file1#include <iostream>using namespace std;void other();void another();int x = 10;int y;int main(){ cout << x << endl; { int x = 4; ...
2019-03-08 20:01:49
116
原创 shell 下连接两个文件编译
一、连接两个文件编译1.g++ -c filename1 -o bianyiname12.g++ -c filename1 -o bianyiname2 //-c 编译filename1 不检测其链接..3.g++ bianyiname1 bianyiname2 -o name3 //链接4../name3二、makfile1.Makefile 文件内容g_tes...
2019-03-08 10:20:34
296
原创 C++第8章编程练习
#include<iostream> using namespace std; void PrintArray(const char * p1,int i=0);//建立一个原型 第二个参数默认为0（其他数也可以，不影响） int _tmain(int argc, _TCHAR* argv[]) {//下面函数调用涉及到重载 char a[]="强"; PrintArra...
2019-03-05 14:44:53
147
原创 C++第8章总结
函数重载函数特征标（如果两个函数的参数数目和类型相同，同时参数的排列顺序也相同，则他们的特征标相同） C++可以定义相同名称的函数，但他们的特征标得不同； double cube(double x )和double cube(double & x) 不能共存； 如果没有匹配的原型，C++会尝试使用标准类型转换强制进行匹配。（如果有多个可以强制匹配的，则会报错） 匹配函数时，并不...
2019-03-05 10:52:20
106
原创 c++第7章课后编程
int main(){ double x,y,means; cout << " enter 2 number \n"; cin >> x >> y; //cin.get(); while(x!=0 and y!=0) // while(!x and !y) ...
2019-03-04 21:21:40
120
原创 c++第七章总结
程序7.5例题long double result = 1.0for (n=numbers,p = picks;p>0;n--,p--) result=result*n/p //循环不是将所有分子相乘，而是分别算每轮的结果。这样的好处：中间项不会很大，交替进行乘除运算的策略可以防止中间结果超出最大的浮点数。程序7.6sizeof 数组名 显示整个数组的长度 （例：int...
2019-03-01 17:20:41
155
原创 c++第六章课后编程总结
6.71.赋值 不能在声明多个变量的同时赋值int a_grade=b_grade=c_grade=d_grade=0;(错误)2.switch{case “A”:{do sth ;break;}default : {do sth ;}}6…1void a_6_1(void){char ch;cout << “input … @ quit\n”;cin.ge...
2019-02-27 16:35:39
153
原创 双系统中linux查看windows下文件并拷贝至linux
1.建立挂载点 如：mkdir /mnt/windows2.挂载 mount /dev/sdb6 /mnt/windows3.进入该挂载点 查看所需文件 cd /mnt/windows更多见：https://blog.csdn.net/CSDNhuaong/article/details/74628385...
2018-12-03 16:54:00
2918
转载 RACH
RACH (Random Access Channel) looks over-complicated, why do we still need it? The main purpose can be described as follows.Achieve UP link synchronization between UE and eNBObtain the resource for...
2018-11-19 20:27:07
810
转载 RACH 知识点
<div id="article_content" class="article_content clearfix csdn-tracking-statistics" data-pid="blog" data-mod="popu_307" data-dsm="post"> &a
2018-11-19 20:21:57
1665
1
原创 WebDriverException: Message: newSession
用selenium打开firefox浏览器时，webdriver.Firefox()报错，不知道为什么…哪位大神可以帮我解答一下，谢谢~~原程序：profile = webdriver.FirefoxProfile()profile.set_preference(‘network.proxy.type’, 0) # 0直接打开，1使用配置打开profile.update_prefer...
2018-11-14 14:53:20
2910
4
原创 pytorch04
linearRegressionnp.array 默认 dtype=float64 (可用a.float查看dtype)此处需定义为 dtype=np.float32 否则torch.nn.linear()无法输出？class LinearRegression(nn.Module):def init(self,input_size,output_size):super(Linear...
2018-11-11 20:23:21
123
原创 pytorch-05
1.保存和加载模型1.保存参数torch.save(model_object.state_dict(), ‘params.pkl’)model_object.load_state_dict(torch.load(‘params.pkl’))model_object:为模型的实例化加载时，要定义该类和实例2.保存模型torch.save(model_object, ‘mod...
2018-11-11 20:20:47
378
原创 远程连接
远程连接linux-linuxIfconfig 查IP连接：lssh 用户名@IP传文件：scp 传输的文件 用户名@IP ：/对端存放路径window-linuxputty
2018-11-02 10:18:21
79
原创 机器学习实战1-KNN
1-KNN算法function 需要4个参数 ：测试vector,数据集，数据label,k返回前k个点出现的频率，选择最高的作为分类1.对测试vector扩维（维数与数据集个数相同），计算欧式距离2.利用argsort进行排序(argsort()函数是将x中的元素从小到大排列，提取其对应的index(索引)，然后输出到y)3.取出前k个元素 将其对应标签的数量+14.排序取出最大...
2018-10-25 21:29:46
71
原创 无法安全用该源进行更新问题
问题提示E: 仓库 “http://ppa.launchpad.net/mystic-mirage/pycharm/ubuntu bionic Release” 没有 Release 文件。N: 无法安全地用该源进行更新，所以默认禁用该源。N: 参见 apt-secure(8) 手册以了解仓库创建和用户配置方面的细节。解决设置—软件和更新----其他软件里去掉这个网站的钩...
2018-10-25 09:36:32
3126
1
原创 后台启动程序命令
命令 ：程序 &返回 [2]（后台运行，1当前运行） 2342(进程ID)例如 : octave &evince xxx.pfd &
2018-10-19 07:45:48
1277
原创 python函数传参
python :传值(pass by value)与传引用(pass by reference)在Python当中，所有的参数都是传引用，也就是说如果你在函数中对参数所指向的对象进行了更改，这个操作将会反应在你的参数上。def changed(mylist,str_):mylist.append(4)str_ = str_ + 'def'list_ = [1, 2, 3]str_...
2018-10-13 12:19:34
165
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人