![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
深度学习与数据处理
文章平均质量分 71
介绍深度学习架构与机器学习,数据处理、数据清洗、数据挖掘方法
咸鱼.m
这个作者很懒,什么都没留下…
展开
-
论文中的误差图绘制(图中图)
# -*- coding: utf-8 -*-"""Created on Sat May 15 16:50:03 2021@author: MYM"""import pandas as pd import matplotlib.pyplot as plt import numpy as npfrom mpl_toolkits.axes_grid1.inset_locator import inset_axesfrom matplotlib.patches import Connecti原创 2021-07-15 19:40:05 · 4420 阅读 · 2 评论 -
2021 年全国大学生数据统计与分析竞赛
本文涉及以下内容1. pandas数据处理、筛选、计算2. 复杂的表格数据计算与处理3. 文本分析与无监督学习4. 将计算结果输出表格5. 数据特征对比赛题思路代码将excel文件中的文本数据转入txt文件# -*- coding: utf-8 -*-"""Created on Sun May 23 13:36:06 2021@author: MYM"""import numpy as npimport pandas as pd # r原创 2021-06-30 21:25:59 · 9058 阅读 · 21 评论 -
pandas.read_csv() 详解与如何合适的读取行序号与列名
#作为常用的函数,pandas.read_csv() 用于读取各种数据文件(.dat.txt.csv等),在这里做一个详细的解释。下面先看官方网站的函数解释,为了简洁,删除了一些不常用的参数。需要的请看官网https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.read_csv.htmlpandas.read_csv(filepath_or_buffer, sep=<object object>, header='原创 2021-05-20 22:28:40 · 12940 阅读 · 2 评论 -
Tensorflow.Keras 时序回归模型的建立
Learn from Keras官方网站目前tensorflow 2.0版本已经集成了keras的所有功能,所以直接安装tensorflow就可以调用Keras,非常方便。Introduction to Keras for Engineers原创 2021-05-20 17:19:01 · 979 阅读 · 0 评论 -
皮尔逊相关分析的MATLAB实现,corr(),corrcoef()函数使用
皮尔逊相关系数可以用来表述两个序列的相关性。常常用来做数据分析、数据挖掘等工作。如何简单快捷的实现皮尔逊相关,并得到结果?需要应用MATLAB中的corr(X, Y)或者 corrcoef(X,Y)函数。其中corr(X, Y)既可以计算矩阵相关也可以计算序列相关,而corrcoef(X,Y)中如果X, Y为矩阵,则会将其转换为序列再进行计算。CORR伪代码X,Y # 为两个序列并且都是列向量.pearson_corr = corr(X, Y) # 求X, Y序列的皮尔逊相关系数.原创 2021-05-12 11:15:38 · 58716 阅读 · 2 评论 -
数据清洗(根据元素匹配选取数据)
解决问题List item原创 2021-05-12 09:52:24 · 417 阅读 · 4 评论 -
python.pandas数据清洗(数据填充与条件删除)
在数据挖掘中,数据清洗占很大一部分工作,数据清洗是一件比较繁琐的事情。本文介绍一下问题的解决方案:1. 读入csv文件,条件过滤缺失值的行或者列2. DataFrame数据的缺失值填充3. Array与DataFrame相互转换,并输出清洗后的csv数据文件本文需要用到三个库import pandas as pdimport numpy as npfrom sklearn.impute import SimpleImputer读入csv文件,条件过滤缺失值的行或者列首先,读入csv文件原创 2021-05-05 17:11:08 · 3251 阅读 · 0 评论 -
Tensorflow-gpu 2.4.1与CUDA11.1,cuDNN8.1配置问题
近日配置最新的tensorflow-gpu2.4.1遇到诸多问题,在这里贴出来以帮助遇到同样问题或者避免大家重蹈覆辙。环境:WINDOWS10 , GPURTX2060, CPUAMD RYZEN 2600, Python3.8这篇文件解决以下问题:应该安装哪些版本的环境才能兼容使用现有的CUDA,cuDNN环境卸载以及如何安装这些环境应该安装哪些版本的环境才能兼容使用安装tensorflow-gpu==2.4.1以及CUDA11.1与CUDNN8.1环境会遇到许多问题,诸如此类1.dl原创 2021-04-27 20:15:16 · 3457 阅读 · 6 评论 -
pandas不可哈希化问题,unhashable type: ‘pandas._libs.tslibs.offsets.Hour
在使用MXNET中Gluonts进行深度学习的时候,经常会用到pandas库对训练数据进行读取以及处理,但是pandas库的1.1.0版本及之后都不再支持时间戳的可哈希化了,笔者试了**pandas1.0.0(2020.1)**时可以支持时间戳可哈希化的。详见此文,以及此文In Pandas 1.1 the freq component of the time-stamps that we use have stopped being hashable, which means, they cannot原创 2021-03-31 22:13:43 · 1019 阅读 · 1 评论 -
python3.7中Gluonts与Mxnet安装问题
Gluonts与Mxnet安装报错安装Gluonts之前需要先安装Mxnet不然会报错安装Mxnet需要python3.6及以下python3版本,python 3.7截止目前不支持,安装会报错如果时Anaconda可以创建python3.6环境安装Mxnet,指令为, conda create --name python36 python=3.6创建环境后,激活python3.6, activate python36安装,conda install mxnet..原创 2021-03-30 22:33:57 · 1405 阅读 · 0 评论 -
C均值聚类算法及其实现
C-均值聚类算法是动态聚类算法的一种动态聚类——兼顾系统聚类和分解聚类下文文字描述居多,公式较少放心食用。首先给出聚类准则函数是误差平方和准则:Jc=∑j=1c∑k=1nj∣∣xk−mj∣∣2J_{c}=\sum_{j=1}^{c}\sum_{k=1}^{n_{j}}||x_{k}-m_{j}||^{2}Jc=∑j=1c∑k=1nj∣∣xk−mj∣∣2其中ccc代表类数,njn_{j}nj代表jjj类的样本数(1)C-均值算法(一)1.从混合样本中抽取c个初始聚合中心。2.计原创 2020-06-21 17:38:09 · 12620 阅读 · 2 评论