- 博客(22)
- 资源 (6)
- 收藏
- 关注
RSS订阅转载 机器学习基础（1）- ROC曲线理解
本文用于理解ROC曲线的定义，绘制过程及其应用实现，主要用于自我温习回顾基础基本目录如下： 什么是ROC曲线？ 1.1 ROC曲线的历史 1.2 ROC曲线的定义 1.3 ROC曲线的应用场景 如何绘制ROC曲线？ 2.1 ROC曲线的绘制原理 2.2 ROC曲线绘制的Python实现 ------------------第一菇 - 什么是ROC曲线-------...
2019-10-31 20:19:44
1990
原创 python3笔记
1、python中的copy.deepcopy表示的是深拷贝，那么浅拷贝则是直接用=号即可，对于浅拷贝和深拷贝来说，如果拷贝对象都是不可变对象的话，那么两者效果是一样的。如果是可变对象的话，“=”拷贝的方式，只是拷贝了内存中的地址引用，两个对象的地址引用一样，所以两个对象的值会随着一方的修改而修改。而对于deepcopy()来说，如果是可变对象的话，那么拷贝内容后新对象的内存地址也会重新分配，跟原...
2019-10-29 22:12:06
448
原创 centos7中使vim显示行号
1、编辑/etc/vimrc,使用vim /etc/vimrc打开文件，然后在末尾加上set nu，如下图所示：2、保存退出，然后重启系统即可，如下图所示：
2019-10-29 17:13:50
1374
原创 centos7执行python时出现ImportError: No module named Tkinter
1、当运行python时出现如下错误：Traceback (most recent call last): File "gradient_test_2.py", line 7, in <module> from common_libs import * File "/sunxj/student5/lr_test/common_libs.py", line 8, i...
2019-10-26 01:11:37
1148
原创 Centos7通过pip安装matplotlib出现_posixsubprocess.c:16:20: 致命错误：Python.h：没有那个文件或目录
1、在通过python2 -m pip installmatplotlib=2.2.4时出现以下错误：DEPRECATION: Python 2.7 will reach the end of its life on January 1st, 2020. Please upgrade your Python as Python 2.7 won't be maintained after t...
2019-10-26 01:02:50
2924
原创 python2和python3的区别
1、首先python2中的xrange与python3中的range是对应的，python3将xrange与range合并了。2、在python2中的pickle中使用的是cPickle，而在python3中则使用的是pickle。3、在python3中出现TypeError: 'dict_keys' object does not support indexing错误，这是由于在pyth...
2019-10-25 21:38:26
174
原创 python通过chardet包获得文件的编码格式
如下代码就是通过chardet包获得文件的编码格式的，其中chardet需要单独安装import chardetbyte=min(32,os.path.getsize(filename))raw=open(filename,'rb').read(byte)result=chardet.detect(raw)encoding=result['encoding']...
2019-10-22 10:13:24
442
原创 CentOS卸载通过yum安装的软件
1、首先通过rpm -qa |grep -i pip查找安装的包，如下图所示：2、然后通过yum remove python2-pip-8.1.2-10.el7.noarch和yum remove libpipeline-1.2.3-3.el7.x86_64卸载，如下图所示：...
2019-10-21 22:31:03
764
原创 centos7安装pip
1、通过yum -y install python-pip命令进行安装提示没有可用软件包 python-pip，如下图所示：已加载插件：fastestmirror, langpacksDetermining fastest mirrors* base: mirrors.aliyun.com* extras: mirrors.aliyun.com* updates: mirro...
2019-10-21 22:15:10
20159
1
原创 python中运行出现TabError: inconsistent use of tabs and spaces in indentation错误
1、当出现TabError: inconsistent use of tabs and spaces in indentation错误时，如下图所示：意思是在代码文件中即使用了tab也使用了空格，就是每一行前边，如下图所示：将代码文件中统一使用tab或空格即可...
2019-10-21 17:15:59
882
原创 使用ng命令时提示无法加载文件 C:\Users\Administrator.LFUWNLEZ8RZJEIT\AppData\Roaming\npm\ng.ps1
1、出错信息：ng : 无法加载文件 C:\Users\Administrator.LFUWNLEZ8RZJEIT\AppData\Roaming\npm\ng.ps1，因为在此系统上禁止运行脚本。有关详细信息，请参阅 https:/go.microsoft.com/fwlink/?LinkID=135170 中的 about_Execution_Policies。所在位置 行:1 字符:...
2019-10-15 15:47:22
9638
原创 window10 npm install 出现MSBUILD : error MSB4132: 无法识别工具版本“2.0”。可用的工具版本为 "4.0"。
1、出现错误，如下图所示：2、从https://download.microsoft.com/download/5/f/7/5f7acaeb-8363-451f-9425-68a90f98b238/visualcppbuildtools_full.exe地址下载Microsoft Visual C++ Build Tools 2015，下载之后安装，如下图所示：3、安装成功之后执行...
2019-10-15 15:30:34
12674
4
原创 python出现TypeError: sequence item 1: expected string or Unicode, int found
1、当运行python出现TypeError: sequence item 1: expected string or Unicode, int found，如下错误信息：org.apache.spark.api.python.PythonException: Traceback (most recent call last): File "/usr/local/src/spark-1....
2019-10-14 11:13:24
4781
原创 python中如果出现中文注释或出现encode character u'\u201c'执行出错的解决方法
1、如果是需要在py代码中写中文注释，那么需要在文件头部加上：#coding:utf-8即可2、如果执行出现：UnicodeEncodeError: 'ascii' codec can't encode character u'\u201c' in position 0: ordinal not in range(128)，那么是由于编码不一致，只需要设置一下编码即可，如下：import...
2019-10-14 10:38:44
5717
原创 windows10 pro更新之后VMware Workstation Pro无法在windows上运行
1、windows10 pro更新之后VMware Workstation Pro无法在windows上运行，如下图所示：2、要么更新VMware最新版本，要么卸载更新，卸载方法找到应用和功能，如下图所示：3、然后找到程序和功能，如下图所示：4、然后选择KB4517389更新，然后卸载，如下图所示：5、然后重启系统即可。...
2019-10-12 10:25:15
901
1
原创 大数据-spark：spark理论
一、spark的运行架构包括集群资源管理器Cluster Manager（standalone：spark自带的、Yarn、Messos）、运行作业的工作节点（Worker Node）、每个应用的任务控制节点（Driver Program简称Driver）、每个工作节点上负责具体任务的执行进程（Executor）。spark采用的是主从架构，包含一个主节点Master（即Driver）和若干个从节...
2019-10-06 23:25:17
718
原创 大数据-spark：函数的应用
1、reduceByKey(func):功能是使用func函数合并具有相同键的值。2、groupByKey()：功能是对有相同键的值进行分组，比如有四个键值对("spark",1),("spark",2),("hadoop",3),("hadoop",5)采用groupByKey()后结果为：("spark",(1,2)),("hadoop",(3,5))3、keys：返回的是键值对的键列...
2019-10-06 23:25:08
356
原创 大数据-spark：spark操作HBase数据库
一、从HBase数据库读1、首先向数据库中插入数据，插入方法请看：https://blog.csdn.net/sunxiaoju/article/details/1019085332、然后打开idea创建maven项目，填写pom.xml，pom.xml内容如下：<?xml version="1.0" encoding="UTF-8"?><project xmln...
2019-10-06 23:24:58
751
原创 大数据-hbase：hbase的应用
1、首先安装hbase，安装方法请看：https://blog.csdn.net/sunxiaoju/article/details/858786962、使用hbase shell进入到hbase的shell，如下图所示：3、可以通过list查看当前数据库中所有的表名，如下图所示：4、使用disable ‘person'查看表是否存在，如下图所示：5、使用drop 'p...
2019-10-06 23:24:50
304
原创 大数据-spark：综合实例、求top值、文件排序、二次排序
一、求top值实例1、首先准备数据文件，假设有两个文件，内容以逗号分隔，分别是orderid,userid,payment,productid要求求出payment TOP N个，下面给出file1.txt、file2.txt、file3.txt文件，文件内容为：（1）file1.txt文件内容：1,1734,43,1552,4323,12,342233,5442,32,3453...
2019-10-06 23:24:38
5741
1
原创 大数据-spark sql：用法
一、文件的读取，首先准备一个people.json文件和一个people.csv文件，文件内容如下：json文件：{"name":"Michael"}{"name":"Andy","age":30}{"name":"Justin","age":19}csv文件为：name,ageMichael,Andy,30Justin,191、读取和写入json文件（1）从...
2019-10-06 23:24:14
1007
原创 mac下hive的安装步骤
1、在安装hive之前要先安装hadoop，具体的安装方法请看：https://blog.csdn.net/sunxiaoju/article/details/861834052、从http://mirror.bit.edu.cn/apache/hive/中下载hive，选择2.3.6版本，如下图所示：3、使用tar -xzvf apache-hive-2.3.6-bin.tar....
2019-10-06 21:46:09
3635
2
vue3.0+typescript集成jquery、bootstrap、jquery.dataTable插件、echart
2020-10-31
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人