- 博客(9)
- 收藏
- 关注
RSS订阅原创 CentOS6重装yum和python
1、首先是把yum和python删除干净 删除python rpm -qa|grep python|xargs rpm -ev --allmatches --nodeps ##强制删除已安装程序及其关联 whereis python |xargs rm -frv ##删除所有残余文件 ##xargs，允许你对输出执行其他某些命令 whereis python ##验证删除，返回无结果 删除yum rpm -qa|grep yum|xargs rpm -ev --allmatches
2020-12-06 16:41:23
321
原创 pyspark操作集群问题汇总
最近在学习spark，在本地win10,连接虚拟机spark，用pyspark操作分布式集群进行数据分析和绘图，遇到了一下bug，这里记录一下。1、检查本地和集群的python、java、spark版本，尽可能保证一致2、NameError: name 'memoryview' is not definedpython版本是2.6.6的，版本太低，升级版本记录一下看到的编译python时两个make的区别注意：make install 与 make altinstall的区别： .
2020-12-06 16:17:33
1016
原创 CentOS6升级glibc-2.14.1
本人的CentOS是6.10版本的，默认只支持glibc最高到2.12。最近使用pyspark调用spark集群j进行数据处理出现要求glibc最低要2.14版本，于是，进行升级一下。报错：libc.so.6: version 'GLIBC_2.14' not found 查看glibc支持版本 [root@hadoop10 glibc]# strings /lib64/libc.so.6 | grep GLIBC GLIBC_2.2.5GLIBC_2.2.6GLIBC_2.3G
2020-12-06 16:11:08
345
原创 大二上学期总结
大二上学期已经过完了，回忆大二上的一整个学期，我在这里对自己的这一个学期进行一下总结。这个学期我参加了一下比赛，刘鼎杯、大创和数学建模。刘鼎杯进入了决赛，大创是校级立项，现在看还算说得过去吧，毕竟还没到检验成果的时候。数学建模还没开始，也不知道会如何。感觉自己这个学期并没有多大的进步，只是在水一些比赛。这个学期前半段时间我还是在随便学，漫无目的。后来，让学长带着打了一下数据挖掘的比赛，开始...
2019-01-18 22:52:30
557
原创 杭电1005
第一次做的时候，我用的是递归的方法去解决#include "stdio.h"int a(int A,int B,int n){ int m; if(n==1||n==2) { return 1; } else { return (A*a(A,B,n-1)+B*a(A,B,n-2))%7; }}...
2018-12-01 20:03:39
183
原创 kaggle cat vs dog
之前学习cnn的时候拿kaggle上的cat vs dog练练手。本模型是用pytorch写的，是一个两层卷积的简单cnn。代码不太难，贴出来看看，应该能懂，就不解释了。import osimport torchimport torch.nn as nnfrom torch.autograd import Variableimport numpy as npimport cv2...
2018-09-24 09:15:21
837
原创 机器学习——神经网络
什么是神经网路我们这里讲的是人工神经网络，这是一种机器学习算法，简单的说就是一种模拟人脑的学习算法，它能通过学习一定的数据，从而对相同事物的具有一定的判断能力。神经元我们的神经网络就是相当于多个神经元的连接。下图是一个神经元：下图是三个输入的神经元模型对比两图，细胞核部分就是我们的输入a1,a2,a3，而轴突部分就是我们的权重w1,w2,w3，Sum就是下一个神经元，我们称为输出，也是此神经元的输...
2018-05-04 23:41:41
423
原创 机器学习——逻辑回归
逻辑回归是一种分类算法，它是输出值一般为离散值，例如我们用1和0来表示是否有肿瘤，那么我们的输出值就只有{0,1}。逻辑回归和线性回归的关系逻辑回归也被称为广义线性回归模型，当我们把线性回归中的常数b0看成x0的系数，且x0=1，这样逻辑回归和线性回归就都有相同的基本形式——b0*x0+b1*x1，它们的区别在于因变量不同，逻辑回归函数把b0*x0+b1*x1放到S（b0*x0+b1*x1）中，这...
2018-04-28 00:08:47
273
原创 机器学习——线性回归
简单线性回归简单线性回归就是用一个一次函数去拟合数据。就像下图一样：横轴是唯一的一个特征，纵轴是标签。由图可以看出，我们能把方程设为y=b0+b1*x，这样我们就得到了简单线性回归的拟合方程多元线性回归多元线性回归就是在简单线性回归方程的基础上增加了特征，在图像上看就是增加了维度。所以我们可以推断出多元线性回归的拟合方程是y=b0+b1*x1+b2*x2+b3*x3+......+bn*xn当我们...
2018-04-26 19:48:01
633
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人