自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

赖德发的博客

征途路上,星辰大海,交流微信:laidefa

原创 【python 机器学习】机器学习算法之LightGBM

算法介绍: LightGBM 由微软2017年提出,主要用于解决 GDBT 在海量数据中遇到的问题,以便其可以更好更快地用于工业实践中。从 LightGBM 名字我们可以看出其是轻量级(Light)的梯度提升机(GBM),其相对 XGBoost 具有训练速度快、内存占用低的特点。 实际上,XGBo...

2019-12-31 16:58:38

阅读数 36

评论数 0

原创 【机器学习 非线性回归模型】10分钟了解下8种常见的非线性回归模型

线性回归模型请看上篇文章,本篇文章介绍的是非线性回归模型 线性回归模型链接 在目前的机器学习领域中,最常见的三种任务就是:回归分析、分类分析、聚类分析。那么什么是回归呢?回归分析是一种预测性的建模技术,它研究的是因变量(目标)和自变量(预测器)之间的关系。回归分析在机器学习领域应用非常广泛,例如,...

2019-12-29 22:06:27

阅读数 30

评论数 0

原创 【matlab 圆周率计算】matlab 求圆周率的两种算法实现比较

%author:laidefa %data:2014-09-19 %丘德诺夫斯基公式求圆周率 function mpi=qdnfsj(m) i=m; s=13591409; for n=1:i A=(factorial(6*n)(13591409+54514013*n))/(...

2019-12-29 22:05:20

阅读数 5620

评论数 0

原创 【机器学习 线性模型】10分钟了解下6种常见的线性模型

在目前的机器学习领域中,最常见的三种任务就是:回归分析、分类分析、聚类分析。那么什么是回归呢?回归分析是一种预测性的建模技术,它研究的是因变量(目标)和自变量(预测器)之间的关系。回归分析在机器学习领域应用非常广泛,例如,商品的销量预测问题,交通流量预测问题。下面介绍几种常见的线性回归模型。 常用...

2019-12-29 12:08:47

阅读数 15

评论数 0

原创 【python 数据可视化】美丽漂亮的画图神器--pyecharts

今天我们介绍下pyechats 的用法和一个简单的例子。 安装: pip install pyecharts 步骤1:导入相关包: # 导入包 import pandas as pd from pyecharts.charts import * from pyecharts import op...

2019-12-28 14:21:47

阅读数 56

评论数 0

原创 【机器学习 模型调参】GridSearchCV模型调参利器

导入模块sklearn.model_selection from sklearn.model_selection import GridSearchCV GridSearchCV 称为网格搜索交叉验证调参,它通过遍历传入的参数的所有排列组合,通过交叉验证的方式,返回所有参数组合下的评价指标得分,...

2019-12-26 12:35:34

阅读数 21

评论数 0

原创 【深度学习 走进tensorflow2.0】TensorFlow 2.0 常用模块tf.config

本篇文章将会教大家如何 合理分配显卡资源,设置显存使用策略。主要使用tf.config模块进行设置。下面我们一起了解下具体用法和例子。 一、指定当前程序使用的 GPU 例如,在一台具有 4 块 GPU 和一个 CPU 的工作站上运行以下代码: import tensorflow as tf gp...

2019-12-21 12:00:04

阅读数 33

评论数 0

原创 【深度学习 项目实战】一个简单的LSTM实现时间序列预测

我们将通过一个简单实例来讲解LSTM建模过程以及模型的使用方法。实例描述如下,我们有一个整数序列[10, 20, 30, 40, 50, 60, 70],整数序列中共有7个数字,我们的目的或者说我们要解决的问题是,利用已有的这个整数序列来建立模型,用模型预测整数序列的下一个数字应该是多少?也就是整...

2019-12-19 12:22:12

阅读数 27

评论数 0

原创 【深度学习 项目实战】Keras深度学习多变量时间序列预测的LSTM模型

本篇文章将介绍基于Keras深度学习的多变量时间序列预测的LSTM模型。 项目名称:空气污染预测 一、主要内容: 如何将原始数据集转换为可用于时间序列预测的内容。 如何准备数据并使LSTM适合多变量时间序列预测问题。 如何进行预测并将结果重新缩放为原始单位。 二、数据下载 在本教程中,我们将使用...

2019-12-19 10:47:09

阅读数 62

评论数 0

原创 【深度学习 走进tensorflow2.0】window10安装GPU 版本 TensorFlow 安装指南

版本信息: python 3.7.5 cuda 10.0 cudnn 7.6.4 window 10 pip install tensorflow_gpu==2.0.0 本机显卡:GeForce GTX 1650 显卡驱动已从官方下载安装成功。 一、下面我们安装cuda10.0: 下载地址:...

2019-12-18 09:49:51

阅读数 36

评论数 0

原创 【深度学习 走进tensorflow2.0】tensorflow.python.framework.errors_impl.UnknownError: Fail to find the dnn imp

windows10 使用tensorflow_gpu==2.0.0 版本跑代码时报错误: 错误描述: Could not create cudnn handle: CUDNN_STATUS_ALLOC_FAILED tensorflow.python.framework.errors_impl.U...

2019-12-18 09:34:03

阅读数 73

评论数 0

原创 【深度学习 走进tensorflow2.0】TensorFlow 2.0 常用模块TFRecord

主要介绍TensorFlow 另一个数据处理的利器——TFRecord。 一、什么是TFRecord ? TFRecord 是 TensorFlow 中的数据集存储格式。当我们将数据集整理成 TFRecord 格式后,TensorFlow 就可以高效地读取和处理这些数据集,从而帮助我们更高效地进行...

2019-12-17 12:34:20

阅读数 68

评论数 3

原创 【深度学习 走进tensorflow2.0】TensorFlow 2.0 常用模块:tf.data 数据流加速

上一篇文章TensorFlow 2.0 常用模块tf.data 介绍了基本的使用读取数据方法,下面我们介绍如何通过 prefetch 和 map 的并行化参数,让 tf.data 的性能得到明显提升。 当训练模型时,我们希望充分利用计算资源,减少 CPU/GPU 的空载时间。然而有时,数据集的准备...

2019-12-17 09:28:23

阅读数 18

评论数 0

原创 【深度学习 走开tensorflow2.0】TensorFlow 2.0 常用模块tf.TensorArray

在部分网络结构,尤其是涉及到时间序列的结构中,我们可能需要将一系列张量以数组的方式依次存放起来,以供进一步处理。当然,在 Eager Execution 下,你可以直接使用一个 Python 列表(List)存放数组。不过,如果你需要基于计算图的特性(例如使用 @tf.function 加速模型运...

2019-12-17 09:16:07

阅读数 12

评论数 0

原创 【深度学习 走进tensorflow2.0】TensorFlow 2.0 常用模块tf.data

背景: 很多时候,我们希望使用自己的数据集来训练模型。然而,面对一堆格式不一的原始数据文件,将其预处理并读入程序的过程往往十分繁琐,甚至比模型的设计还要耗费精力。为此,TensorFlow 提供了 tf.data 这一模块,包括了一套灵活的数据集构建 API,能够帮助我们快速、高效地构建数据输入的...

2019-12-16 09:17:14

阅读数 21

评论数 0

原创 【深度学习 走进tensorflow2.0】TensorFlow binary was not compiled to use: AVX2

window10 本地安装tensorflow cpu 版本 pip install tensorflow==2.0.0 安装完成之后运行时总会显示如下警告信息: Your CPU supports instructions that this TensorFlow binary was n...

2019-12-15 20:43:08

阅读数 11

评论数 0

原创 【深度学习 走进tensorflow2.0】TensorFlow 2.0 常用模块@tf.function

1、@tf.function 是干什么用的? 虽然默认的 Eager Execution 为我们带来了灵活及易调试的特性,但在特定的场合(例如追求高性能或部署模型)时,我们依然希望使用图模式,将模型转换为 TensorFlow 图模型。此时,TensorFlow 2.0 为我们提供了 tf.fun...

2019-12-15 15:07:28

阅读数 31

评论数 0

原创 【深度学习 走进tensorflow2.0】建立一个递归神经网络(LSTM)对MNIST数字集进行分类

大家都知道卷积神经网络可以用来做图片分类,那么循环神经网络可不可以同样用来做图片分类呢,答案是可以滴,下面我们使用TensorFlow 2.0构建循环神经网络LSTM,一起从minist 学习下吧。 数据集特点: 该数据集包含60,000个用于训练的示例和10,000个用于测试的示例。这些数字已经...

2019-12-14 20:49:16

阅读数 28

评论数 0

原创 【python pip换源】5分钟了解下window10和linux 下换源操作

使用过默认的pip 安装包的同学们都知道,默认的pip 安装起包来速度没有那么快,那么有没有更快速的方法安装起包来呢?有,使用国内的清华镜像源,直接在国内下载安装包,弯道超车起步更快,总比去国外下载包来得更快哦。下面我们一起来了解下具体用法。 一、临时使用清华镜像源安装包 pip install ...

2019-12-14 19:42:54

阅读数 32

评论数 0

原创 【python 数据处理】数据框行转列以及分组取第一个

一、python数据框按某列分组取第一个 核心: df.sort_values(['date_time2','value'],ascending=[1,1],inplace=True) grouped = df.groupby(['date...

2019-12-11 10:48:03

阅读数 10

评论数 0

原创 【python 文件合并】合并同一文件下所有格式一样的txt、csv文件

在同一个目录下有很多格式一样的txt 或者csv文件,怎么把他们合并成一个大的txt或者一个大的csv文件呢? 解决方案: 合并同一个文件下所有的txt: # -*- coding: utf-8 -*- import pandas as pd import os # 设定所有文件存放路径 sa...

2019-12-11 10:34:08

阅读数 15

评论数 0

原创 【navicat 连接失败】出现1251- Client does not support authentication protocol 错误 解决方法

原因分析: 原因是在mysql8之前的版本中加密规则为mysql_native_password 而在mysql8以后的加密规则为caching_sha2_password。 因此需要重新修改密码哦。 解决方案如下: 进入MySQL的bin目录,然后输入mysql -u root -p,输入密码 ...

2019-12-10 15:52:07

阅读数 12

评论数 0

原创 【机器学习 Alink开源】10分钟了解下阿里开源机器学习平台alink

1、什么是Alink? Alink 是阿里巴巴计算平台事业部PAI团队从 2017 年开始基于实时计算引擎 Flink 研发的新一代机器学习算法平台,提供丰富的算法组件库和便捷的操作框架,开发者可以一键搭建覆盖数据处理、特征工程、模型训练、模型预测的算法模型开发全流程。 github下载地址: h...

2019-12-07 16:44:02

阅读数 52

评论数 0

原创 【python 读取数据】UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc9 in position 2: invalid continu

python 读取txt数据报如下错误: filename='D:/2019-09-01.txt' data = pd.read_table(filename, sep=',', header=None) print(data) UnicodeDecode...

2019-12-11 17:14:16

阅读数 11

评论数 0

原创 【python 错误解决】ModuleNotFoundError: No module named 'win32api'

问题描述:使用ipython notebook 报如下错误: ModuleNotFoundError: No module named 'win32api' 解决方法: pip install pypiwin32 重启 ipython notebook 就可以啦

2019-12-08 21:12:05

阅读数 17

评论数 0

提示
确定要删除当前文章?
取消 删除