自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(35)
  • 收藏
  • 关注

转载 python 安装 Anaconda 以及 Linux 安装可视化图形界面

转自https://blog.csdn.net/jameslvt/article/details/81348499 1.首先安装界面之前需要安装Anaconda,这里自己看自己想要哪个版本,我是装的高版本,能切换到低的版本wget https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/Anaconda3-5.0.0-Linux-x8...

2018-08-25 11:36:25 2563

转载 基于VMware的CentOS7虚拟机硬盘扩容

转自https://blog.csdn.net/hampton_chen/article/details/81370170 简介在自己的电脑上安装CentOS7虚拟机,分配的硬盘空间基本是20G,但在使用一段时间后发现原先分配的空间不够用,这时就需要对虚拟机进行扩容。本篇文章将介绍基于VMware的CentOS7的扩容方法。注:本篇文章中的虚拟机由20G扩容到30G。VMware...

2018-08-25 11:16:23 2372 3

转载 centos 怎么查看哪个目录或文件占用最大的硬盘空间

du -sh. 系统只显示当前文件夹所占用的总空间du -a. 显示的是所有的文件.包括子文件夹下所有文件也显示..某个文件夹的话例如home:du -sh /home/*

2018-08-17 14:26:41 13230 1

转载 Windows下Anaconda2(Python2)和Anaconda3(Python3)的共存

转自https://blog.csdn.net/infin1te/article/details/50445217前言Anaconda是一个Python的科学计算发行版,包含了超过300个流行的用于科学、数学、工程和数据分析的Python Packages。由于Python有2和3两个版本,因此Anaconda也在Python2和Python3的基础上推出了两个发行版,即Anaconda2...

2018-08-17 09:17:15 152

转载 Centos 7.2基础安装和配置(含分区方案建议)

转自https://www.cnblogs.com/set-config/p/9040407.html如果你是新手记住:除了SWAP分区外,其他分区的文件系统一律选择ext4类型,设备类型默认选LVM-------------------------------------------------分区方案描述---------------------------------------...

2018-08-17 09:17:03 16769 1

转载 Windows Intellij 运行python 报错Error running : @NotNull method com/intellij/execution/configurations

转自https://www.jianshu.com/p/b98b81a3a1a1此错误是因为没有配置File→Projec Structure→Modules,可以Close Project后重新选择Import Project,并配置python SDK即可

2018-08-16 17:26:01 22725

转载 python神器——Anaconda的安装与优化配置

转自https://blog.csdn.net/qq_38188725/article/details/80624004 对于初学者来说,原版的python在使用的时候非常麻烦,特别是在添加库、升级库的时候总是会报好多错误,缺这缺那。但是自从有了Anaconda以后,妈妈再也不用担心我用不了python啦!Anaconda相当于一个python的整合包,是一个开源的python发行版本...

2018-08-16 16:52:42 631

转载 IntelliJ IDEA远程调试python

转自https://blog.csdn.net/u013982921/article/details/80904005最近开始学习python版本的map reduce,需要编写一些python程序在自己的虚拟机上,在虚拟机上调试比较麻烦,于是自己上网搜素了一下资料,配置好了,按照如下方式配置就可以了:1、首先使用IntelliJ IDEA创建一个空项目。空项目创建完毕后会弹出创建Modu...

2018-08-16 15:38:59 1421

转载 Pycharm配置远程调试

转自https://blog.csdn.net/five3/article/details/78615589条件pycharm需要专业版方式使用远程解释器 使用远程调试器使用远程解释器默认情况下我们在本地开发Python程序时,使用的是本地的Python解释器,如果你安装了virtualenv或者pyenv的话,还可以选择这些虚拟环境。而使用Pycharm的专业版,则还可以选...

2018-08-16 14:27:44 255

转载 pycharm在windows上创建项目代码运行失败问题

转自https://blog.csdn.net/Jameslvt/article/details/80938874 1.在windows上pycharm开发完成代码后,同步到linux上发现,都是报错,仔细查看代码,并没有错,原因就是文件格式不对。 解决办法就是修改pycharm配置: file-setting下 左侧code style line separator下拉选择unix就...

2018-08-16 14:25:32 899

转载 python2.7版本在64位系统安装遇到的问题

转自https://blog.csdn.net/huanhuanq1209/article/details/71710072?locationNum=5&fps=1 1、第一次安装时出现错误如下“An error occurred during the installation of assembly 'Microsoft.VC90.CRT,version="9.0.30729...

2018-08-16 13:54:37 1197

转载 Pycharm(自动生成开头两行代码)

转自https://blog.csdn.net/Jameslvt/article/details/81037949 我们在写Python程序时,有两行代码总是重复的。 1 2 #!/usr/bin/env python # -*- coding:utf-8 -*-   如何在使用Pycharm时自动帮我们生成这两行代码呢直...

2018-08-16 11:39:34 1288

转载 python-2.7.15.amd64.msi下载

转自https://blog.csdn.net/yu_chunhai/article/details/80494657 python-2.7.15.amd64.msihttps://pan.baidu.com/s/1LbvbgDC83D4B63hJWHoTGA

2018-08-16 11:35:04 6400

原创 Pycharm下载安装步骤

一、下载和安装1、下载地址:https://www.jetbrains.com/pycharm/download/#section=windows选择Professional版本2、下载完成33、安装Pycharm4、如下选择后NEXT5、默认,点Install=============================================...

2018-08-16 09:47:56 239

转载 搭建hadoop2.6.0 HA及YARN HA

转自:https://www.cnblogs.com/selinux/p/4155814.html以前用hadoop2.2.0只搭建了hadoop的高可用,但在hadoop2.2.0中始终没有完成YARN HA的搭建,直接下载了hadoop最新稳定版本2.6.0完成了YARN HA及HADOOP HA的搭建流程,没有仔细看hadoop的官方文档,貌似hadoop2.2.0不支持YARN HA,...

2018-08-11 22:45:10 285

原创 scipy.sparse.csr_matrix

 地址:https://docs.scipy.org/doc/scipy-0.18.1/reference/generated/scipy.sparse.csr_matrix.html  scipy.sparse.csr_matrixclass scipy.sparse.csr_matrix(arg1, shape=None, dtype=None, copy=False)[s...

2018-08-07 14:27:35 2254

原创 SciPy

官网地址:https://scipy.org/  博客 SciPy(发音为“Sigh Pie”)是一个基于Python的数学,科学和工程开源软件生态系统。特别是,这些是一些核心包: NumPy的 基本N维数组包 SciPy库 科学计算的基础库 Matplotlib 全面的2D绘图 IPython的 增强交互式控制台 ...

2018-08-07 14:22:36 2826

转载 python \r \t \n 各种转义字符

转自https://blog.csdn.net/xufangfang5206/article/details/80030300转义字符 描述 \(在行尾时) 续行符 \\ 反斜杠符号 \’ 单引号 \” 双引号 \a 响铃 \b 退格(Backspace) \e 转义 \000 空 \n 换行 ...

2018-08-07 11:27:21 873

转载 矩阵与矩阵乘法规则

矩阵与矩阵相乘 第一个矩阵的列数一必须等于第二个矩阵的行数 假如第一个是m*n的矩阵 第二个是n*p的矩阵 则结果就是m*p的矩阵 且得出来的矩阵中元素具有以下特点:第一行第一列元素为第一个矩阵的第一行的每个元素和第二个矩阵的第一列的每个元素乘积的和 以此类推 第i行第j列的元素就是第一个矩阵的第i行的每个元素与第二个矩阵第j列的每个元素的乘积的和...

2018-08-04 02:52:27 5298

原创 ∑是什么意思

∑是求和符号英语名称:Sigma汉语名称:西格玛(大写Σ)4∑ 0.5i               =0.5×1+0.5×2+0.5×3+0.5×4 =5i其中i=1其中i=1是下标,4是上标,0.5i是代数式。然后分别代入i的值求和...

2018-08-03 00:12:10 14529

转载 机器学习中训练集、验证集和测试集的作用

转自:https://blog.csdn.net/neleuska/article/details/73193096 通常,在训练有监督的机器学习模型的时候,会将数据划分为训练集、验证集合测试集,划分比例一般为0.6:0.2:0.2。对原始数据进行三个集合的划分,是为了能够选出效果(可以理解为准确率)最好的、泛化能力最佳的模型。训练集(Training set)作用是用来拟合模型,...

2018-08-01 14:12:22 962

转载 概率学中,P(A∣B)是什么意思?如何计算?算式意义是什么?

P(A∣B)是条件概率公式,P(A|B) = P(AB)/P(B)。P(A|B)——在B条件下 A 的概率.即事件A 在另外一个事件B已经发生条件下的发生概率。P(AB)——事件A、B同时发生的概率,即联合概率.联合概率表示两个事件共同发生的概率.A 与 B 的联合概率表示为 P(AB) 或者 P(A,B)。P(B)——事件B发生的概率.条件概率 示例:就是事件A 在另外一个事件 B ...

2018-07-31 11:21:05 59049 1

转载 python中的os.listdir()方法、os.path.isdir()方法

转自:https://blog.csdn.net/beyond_f4/article/details/78703572 Python中的os模块用于和系统进行交互,其中os.listdir()用于返回一个由文件名和目录名组成的列表,需要注意的是它接收的参数需要是一个绝对的路径例如:已知路径path = /home/python/Desktop/请输出该路径下的所有文件和...

2018-07-27 09:44:18 56283 2

转载 一步一步带你安装史上最难安装的 vim 插件 —— YouCompleteMe

转自:https://www.jianshu.com/p/d908ce81017a YouCompleteMe is a fast, as-you-type, fuzzy-search code completion engine for Vim.参考: https://github.com/Valloric/YouCompleteMe#full-installation-guide本...

2018-07-27 09:40:45 2934

原创 print "%s\t%s" % (key, val) 和print key + "\t" +val和print '\t'.join([key, val])的效果一样

test.py内容如下:#!/usr/local/bin/pythonimport sysfor line in sys.stdin: ss = line.strip().split('\t') key = ss[0] val = ss[1] print "%s\t%s" % (key, val) print key + "\t" +val pr...

2018-07-26 14:10:06 2055

转载 Python中append、extend和join的区别

转自:https://blog.csdn.net/soaringlee_fighting/article/details/78891033 函数用法说明:append() list.append(object) 向列表list中添加一个对象object例子:>>> list=[12,34,56,78,90]>>> list[12,...

2018-07-26 11:48:47 877

转载 出现map没结束,就跑reduce的情况

跑其他的mr任务没有出现这种情况,一直以为是跑完map再跑reducer这里会涉及到一个阈值的问题就是当map任务完成到多少的时候就会启动reduce任务,并不是map结束后才跑reduce什么是Shuffle?    Hadoop的shuffle过程就是从map端输出到reduce端输入之间的过程,这一段应该是核hadoop中最心的部分,因为涉及到Hadoop中最珍贵的网络资源。...

2018-07-25 17:03:03 3027

转载 Python程序退出: os._exit()和sys.exit()

 转自:https://blog.csdn.net/index20001/article/details/74294945 概述Python程序有两种退出方式: os._exit() 和 sys.exit()。我查了一下这两种方式的区别。os._exit() 会直接将python程序终止,之后的所有代码都不会执行。sys.exit() 会抛出一个异常: SystemExit...

2018-07-25 16:54:55 1531

转载 字符编码和python使用encode,decode转换utf-8, gbk, gb2312

ASCII码标准ASCII码使用7位二进制数表示大写或小写字母,数字0到9标点符号以及在美式英语中使用的特殊控制字符。在标准ASCII码中,最高位(b7)用作奇偶校验位,所谓奇偶校验,是指在代码传送过程中用来检验是否出现错误的一种方法,一般分寄校验和偶校验两种。奇校验规定:正确的代码一个字节中1的个数必须是奇数,若非奇数,则在最高位b7添1;偶校验规定:正确的代码一个字节中1的个数必须是偶...

2018-07-25 15:40:01 269

原创 刚才跑mapreduce时候看到过程中有临时进程

刚才跑mapreduce时候看到过程中有临时进程

2018-07-25 09:24:06 112

原创 python recsys_local.py后报错 import redis ImportError: No module named redis

Python默认不支持Redis的,要为Python安装Redis库,下载地址https://github.com/andymccurdy/redis-py,点clone and download后选择download zip下载后上传到虚拟机上,解压并安装[root@master badou]# cd sftp/[root@master sftp]# lsfenfa_mr ...

2018-07-24 23:34:42 496

原创 显示或隐藏不可见字符

显示默认情况下,vim是不会显示tab等其他分隔符的,要显示的话可通过以下命令实现:方法1::set list方法2:在命令后面加| less ==================================================隐藏方法::set nolist...

2018-07-24 11:48:27 12449

原创 跑hadoop任务时提示running beyond virtual memory limits

结尾还提示:Error: java.lang.RuntimeException: PipeMapRed.waitOutputThreads(): subprocess failed with code 1 解决方法:     首先保证/usr/local/src/hadoop-2.6.1/etc/hadoop/hdfs-site.xml下<name>dfs.replicat...

2018-07-24 02:42:41 493

原创 Linux CentOS 7 redis安装和make报错"cc:未找到命令"解决方案

下载地址:http://download.redis.io/releases/redis-2.8.3.tar.gz下载到虚拟机上并解压:wget /usr/local/src/ http://download.redis.io/releases/redis-2.8.3.tar.gz 执行make,提示错误如下:提示cc:未找到命令,原因是虚拟机系统中缺少gcc,安装一下gcc即...

2018-07-24 00:19:28 1179

原创 Vim怎么显示隐藏行号,永久显示隐藏行号

1、显示隐藏行号:(1)显示vim 打开一个文件,敲命令:set number 或者 :set nu 然后回车(2)隐藏:set nonumber 或者 :set nonu 2、永久显示隐藏行号:(1)永久显示vim ~/.vimrc 输入set number 或者 set nu 就可以了(2)永久隐藏vim ~/.vimrc 输入set n...

2018-07-23 22:58:15 695

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除