huoxingdeshidai6的博客

原创 ROC与AUC

1、ROC、AUC概念介绍2、ROC曲线绘制原理3、ROC的曲线面积AUC4、ROC曲线优点1、ROC、AUC概念介绍ROC的全名叫做Receiver Operating Characteristic，其主要分析工具是一个画在二维平面上的曲线——ROC curve。平面的横坐标是false positive rate(FPR)，纵坐标是true positive rate...

原创 几种交叉验证方式比较及应用

模型评价的目的：通过模型评价，我们知道当前训练模型的好坏，泛化能力如何？从而知道是否可以应用在解决问题上，如果不行，那又是哪里出了问题？本文涉及（1）交叉验证的方式比较、（2）交叉验证的scoring参数1、交叉验证方式比较train_test_split在分类问题中，我们通常通过对训练集进行train_test_split，划分成train 和test 两部分，其中tr...

原创 数据预处理：非数值型特征如何进行编码

一般机器学习数据预处理过程中，对于非数值型特征编码可以采用如下几种方式：1、one-hot编码（独热编码）2、映射有序特征one-hot编码（独热编码）：如果该特征下可以分为多个类别，且各类别是并列关系，则适合使用one-hot编码方式进行处理。例如，衣服的颜色red、green、yellow就是属于这种并列关系一般机器学习数据预处理过程中，对于非数值型特征编码可以采用如...

原创 ImportError: No module named MySQLdb问题

在python 2版本下使用mysql的时候，可能未安装mysqldb而报ImportError: No module named MySQLdb的错误：可以通过如下方式解决：pip install MySQL-python

原创 Variable model/rnn/multi_rnn_cell/cell_0/basic_lstm_cell/kernel already exists问题解决方案

在脚本的开始，放入下面这行代码即可：tf.reset_default_graph()

转载 DTW算法原理解析

DTW为(Dynamic Time Warping,动态时间归准)的简称。应用很广，主要是在模板匹配中，比如说用在孤立词语音识别，计算机视觉中的行为识别，信息检索等中。可能大家学过这些类似的课程都看到过这个算法，公式也有几个，但是很抽象，当时看懂了但不久就会忘记，因为没有具体的实例来加深印象。 这次主要是用语音识别课程老师上课的一个题目来理解DTW算法。 ...

转载 解决python3下mysqldb不支持

MySQLdb 只适用于python2.x，发现pip装不上。它在py3的替代品是：import pymysql安装pymysql一些框架默认仍然用的是MySQLdb，但是python3已经不支持MySQLdb，取而代之的是pymysql，因此运行的时候会报ImportError: No module named ‘MySQLdb’（我的是在使用sqlalchemy的时候出现的错误）...

原创 /lib64/libc.so.6: version `GLIBC_2.16’错误

通过安装tensoflow 1.7可以解决，安装教程可参考https://blog.csdn.net/huoxingdeshidai6/article/details/89250058

原创 linux 下安装anaconda、tensorflow、Keras

一 、安装anaconda1、在anaconda官网下载对应anaconda版本，例如在linux系统下下载python 2.7版本的anaconda：对应的文件链接地址为：https://repo.anaconda.com/archive/Anaconda2-2019.03-Linux-x86_64.sh在linux运行命令，下载文件：wget https://repo...

原创 python3安装mysql

pip  install PyMySQLimport pymysql as MySQLdbpython3不支持mysql-python 安装第三方包pymysql。下载地址：https://pypi.python.org/pypi/PyMySQL#downloads使用方法：import pymysql as MySQLdb转载：https://www.jianshu.com/p/44821b6c...

原创 windows安装pyspider教程

1、安装python或者anaconda（在添加环境变量，包括安装路径、Scripts路径等，）2、在dos下运行pip  install pyspider  安装pyspider环境3、在dos中运行pip install -U distribute4、在dos中运行pyspider all   启动pyspider 5、在浏览器中访问http://localhost:5000/，访问成功则表示...

转载 Python 读写CSV文档

Python–读写CSV文档原文链接：http://blog.csdn.net/u011089523/article/details/52859371CSV是英文Comma Separate Values（逗号分隔值）的缩写，顾名思义，文档的内容是由 “,” 分隔的一列列的数据构成的。CSV文档是一种编辑方便，可视化效果极佳的数据存储方式。而Python中有着非常强大的库可以处理这

原创 python openpyxl实现添加读写操作（主要针对xlsx格式）

from openpyxl import Workbookfrom openpyxl.compat import rangefrom openpyxl.utils import get_column_letterdest_filename = 'empty_book1.xlsx'wb = Workbook()ws1 = wb.activews1.title = "range na

原创 python中保留excel中原数据的情况下在excel的添加新的数据

# -*- coding: utf-8 -*-import xlwt;import xlrd;#import xlutils;from xlutils.copy import copy;#先建立一个含有数据的excel表格，styleBoldRed = xlwt.easyxf('font: color-index red, bold on');headerStyle = st

原创 python的编码问题

在python中，我们常使用encode()函数和decode()来编码和解码。在python中，使用unicode类型作为编码的基础类型，即decode              encodestr ---------> unicode --------->str#!/usr/bin/python# -*- coding: UTF-8 -*- u = u'中文

原创 Anaconda中python安装模块命令

方法一：        在Anaconda Prompt里运行conda install 模块名    方法二：        下载模块的whl安装包，然后在Anaconda Prompt里运行 pip install 模块名（含路径）    方法三：        下载模块的exe文件，点击安装。例如mysql-python，但是该方法要求安装包和python的版本必须匹配。

原创 BP神经网络推导

原创 JAVA 网络

TCP例子：Server端：import java.net.*;import java.io.*;public class TCPServer{ public static void main(String args[]) throws Exception{ ServerSocket ss =new ServerSocket(7777); //build a 7777 port

原创 JAVA 线程

线程Java的线程是通过java.lang.Thread类实现的JVM启动时会有一个由主方法（public static void main(){})所定义的线程。可以创建Thread的实例来创建新的线程，但是每个线程调用Thread对象的run()方法来实现多线程操作，通过Thread的start()来启动一个线程。例子1：实现Runnable接口，然后创建Thread类

原创 JAVA IO

输入/输出流的分类：java.io包中定义了多个流类型（类或抽象类）来实现输入/输出功能；可以从不同的角度对其进行分类：按数据流的方向不同可以分为输入流和输出流按处理数据单位不同可以分为字节流和字符流按功能不同分为节点流和处理流输入和输出都是站在程序的角度上来说的。J2SDK所提供的所有流类型位于包java.io内都继承自一下四种抽象类型： 字节流

原创 JAVA容器

Collection接口定义了一个存取一组对象的方法，其子接口Set和List分别定义了存储方式。Set中的数据对象没有顺序切不可以重复。List中的数据对象有顺序且可以重复。Map接口定义了存储“键(key)-值(value)映射对” 的方法。Collection接口中的方法：int seize();boolean isEmpty();void clear

原创 循环递归目录

import java.io.File;public class FileList { public static void main(String args[]){ File f = new File("I:KuGou"); System.out.println(f.getName()); tree(f,1); } private static void tree(Fi

原创 排序和二分查找

//从小到大排序,返回一个整形数组public static int[] arraySorted(int a[]){ int len = a.length; for (int i=0;i<len;i++){ int minA = i; for(int j=i;j<len;j++){ if( a[minA]> a[j]){ minA = j; } } in

原创 java 数三退一

public class Count3Qiut { public static void main(String args[]){ boolean[] boo = new boolean[500]; for(int i=0;i<boo.length;i++){ boo[i] = true; } int count = 0; int index = 0; i

原创 JAVA异常

Java程序的执行过程中如出现异常事件，可以生成一个异常类对象，该异常对象封装了异常事件的信息并将其提交给java运行时系统，这个过程称为抛出（throw）异常。Exception异常是必须抛的异常，用try...catch捕捉，而RuntimeException异常可以用try...catch捕捉，也可以不捕捉。Error:称为错误，有Java虚拟机生成并抛出，包括动态链接失

原创 JAVA子类对象访问父类被重写方法

private String name; public Animal(String name){ this.name = name; } public void getCry(){ System.out.println("Animal"); }}public class Cat extends Animal { private String name; priv

原创 python读取和写入txt 编码问题

def getListFromFile(path,str): list = [] file = open(path) lines = file.readlines() for line in lines: list.append(line.strip()) return listimport repriceList = getList

原创 爬虫 登入电驴

import urllibimport urllib2postdata=urllib.urlencode({ 'username':'spidertest', 'password':'spidertest1', 'continueURI':'http://www.verycd.com/', 'fk':'', 'save_cookie':'1',

原创 爬虫 取得站内最大页数

12345678910下一页尾页在尝试爬虫时，如何获得站内最大页数呢？即是上述xml代码中的19.方法有如下几种：第一：使用正则表达式import relast_page_num = re.findall(r'',first_html,re.S)print last_page_num[-1]第二种：使用xpath方法from lx