动手学数据分析，首次笔记

最新推荐文章于 2024-05-19 23:31:32 发布
最新推荐文章于 2024-05-19 23:31:32 发布
阅读量224 收藏
点赞数
文章标签： python 数据分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41789489/article/details/121368599
版权

这里写自定义目录标题

动手学数据分析

载入数据

相对路径

在ipynb文件的相对路径下载入数据，比如在同级目录下，直接输入文件名就可以导入。

绝对路径

数据文件在计算机中的路径。MacOS下的绝对路径技巧：右键文件的info，然后复制文件位置，最后加上文件名即可

如何在mac系统中获得绝对路径

如何在mac系统中获得绝对路径
在这里插入图片描述

逐块提取数据的功能

时数据的尺寸非常大，计算机的内存不一定能同时处理整个文件，所以要使用逐块提取数据：设置一个size，每次提取这个size的数据，完成遍历后，组成一个完成的数据文件
chunker的数据结构类似数组，打印出来后是根据size均分的数个数组组成的数据文件

指定提取数据

读取特定的行与列

提取前n行
在这里插入图片描述
提取n+1～n+1+m行

在这里插入图片描述
指定某行
在这里插入图片描述

修改DataFrame的列名

在载入时修改：

df = pd.read_csv(‘文件名’,names=[‘要改的表名’, … ], indexCol=‘主索引键列名’,header=0)

在载入后修改

在这里插入图片描述

查看df的基本信息

在这里插入图片描述

查看指定行数信息

前n行：df.head(n)
后n行：df.tail(n)
head是头，tail是尾巴

中间行，可以使用切片

iloc在这里插入图片描述
索引：df[n:m]
此结构为左闭右开
在这里插入图片描述

查看空数据

判断空数据，返回true
在这里插入图片描述
判断整个表是否有空
在这里插入图片描述
判断哪些列有空
在这里插入图片描述
统计列的空值个数
在这里插入图片描述
统计所有空值的个数（也可以用.sum().sum()
在这里插入图片描述
打印有空值的rows
在这里插入图片描述

漂浮橙子
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
大数据分析案例-基于决策树算法预测ICU患者是否需要插管
m0_64336780的博客
03-15 5940
本项目旨在构建决策树分类模型来辅助医生判断患者是否需要进行插管，同时分析哪些因素对于判断患者是否需要插管的影响最大。本次实验中遇到的数据集非常不平衡，采用了过采样和欠采样，然而两种方法最后得到的结果截然不同，事实证明还是过采样处理最后的模型效果较为不错。心得与体会：通过这次Python项目实战，我学到了许多新的知识，这是一个让我把书本上的理论知识运用于实践中的好机会。原先，学的时候感叹学的资料太难懂，此刻想来，有些其实并不难，关键在于理解。在这次实战中还锻炼了我其他方面的潜力，提高了我的综合素质。
Python数据分析与展示学习笔记-2-1
12-20
维度：一组数据的组织形式，数据维度就是在数据之间形成特定关系，表达多种数据含义的基础概念。 （1） 一维数据：由对等关系的有序或无序数据构成，采用线性方式组织，对应列表、集合、数组等概念  列表：列表中每...
《动手学深度学习2.0》学习笔记（一）
m0_51619560的博客
01-18 851
动手学深度学习2.0》电子书的链接地址为https://zh.d2l.ai/index.html本文记录了我在学习本书前4章节（包括引言、预备知识、线性神经网络、多层感知机）过程中的理解和收获。more。
《动手学深度学习2.0》学习笔记（五）
m0_51619560的博客
01-18 944
给定一个凸集χ\chiχ,如果对于所有xx′∈Xxx′∈X和所有λ∈01λ∈01, 函数fX→RfX→R是凸的，我们可以得到λfx1−λfx′≥fλx1−λx′λfx1−λfx′≥fλx1−λx′凸函数在定义域上的任意两点之间的割线总在这两点连线的上方或者重合。当一个函数的二阶导数存在且大于0时，函数为凸函数。
学习大数据分析python编程指南
yuuEva的博客
09-29 1123
　　每个人都喜欢Python。如果您打算开始从事数据科学事业，我们可以肯定Python在您心中已经占有特殊的位置。它直观且易于在任何平台上运行，并且具有大量令人惊叹的库和工具。与其他编程语言相比，Python在深度学习算法方面也提供了强大的支持。此外，它拥有庞大的数据科学家和开发人员社区，可以不断改进语言。实际上，关于Python编程，还有更多的话要说–应用程序，工作前景，IDE，库，框架，从何处开始，如何开始……，我们专门针对它进行全面介绍。 　　因此，欢迎阅读学习大数据分析python编程指南! 　
《动手学深度学习2.0》学习笔记（三）
m0_51619560的博客
01-18 912
《动手学深度学习2.0》学习笔记（三） 《动手学深度学习2.0》电子书的链接地址为https://zh.d2l.ai/index.html 本文记录了我在学习本书8-10章节（包括循环神经网络、现代循环神经网络、注意力机制）过程中的理解和收获。 笔记首次发布于我的博客https://valoray.github.io/，排版比CSDN稍好看一些，但内容是一致的。 循环神经网络 引言 data：表格数据、图像数据、序列数据。 对于表格数据和图像数据，我们默认所有样本都是独立同分布的 表格数据：通常利用机器
2024考研408-操作系统 第二章-进程与线程 学习笔记
每个人都是独一无二的，把握好自己的节奏，跟着自己的心走。
07-12 9250
目前正在备考24考研，现将24计算机王道的408学习整理的知识点进行汇总整理。博客目录索引(持续更新)进程控制本质：实现进程的状态转换。创建新进程就是创建态的过程，撤销已有进程则是终止态。进程通信（Inter-Process Communication, IPC）：是指的两个进程之间产生数据。实际例子：微博中的图文分享到其他应用当中。什么是线程，为什么要引入线程？引入了进程之后，想要实现进程的并发，那么我们对于时间片都是直接分配给某个进程，此时就能够实现边聊QQ和边听音乐。
学习php语言笔记
JackieDYH的博客
08-23 741
第一章、学前准备 1地址 格式：http：//host[:port][abs_path] http://表示要通过HTTP协议来定位网络资源 host表示合法的internet主机域名或者ip地址 port指定一个端口，可与省略默认为80 abs_path被请求资源的位置 2需要安装的软件 web服务器 apache php应用服务器 解释，执行我们编写的PHP程序 ...
【动手学深度学习（pytorch版）】笔记1——线性回归
qq_39565461的博客
02-14 439
想着趁着疫情在家，安心学习一下。加入了Datawhale的公益课程“14天挑战《动手学深度学习》（Pytorch版）”，李沐大神的书早就买了，可是MXNet一直让我望而却步，刚好有这次机会学习Pytorch版的，何乐而不为呢？ 刚好需要打卡，便写系列博客用于记录学习过程中的一些想法及笔记吧。 第一天，当然就是机器学习的“Hello World”了——线性回归 线性回归 本节对应《动手学深度学习》第...
2024年最新2024腾讯面试算法题，python数据分析必备神器：Anaconda，2024年最新阿里巴巴面试题库
yjqdn82212的博客
04-23 445
还有很多项目使用的包版本不同，比如不同的pandas版本，不可能同时安装两个 Numpy 版本，你要做的应该是，为每个 Numpy 版本创建一个环境，然后项目的对应环境中工作。当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。
牛客python数据分析代码笔记
04-10
牛客python数据分析代码笔记
python数据分析与数据化运营笔记
03-08
学习笔记（整本书的）
Python数据分析实战 内利著 学习笔记
12-21
Python数据分析实战 内利著 学习笔记 Python数据分析实战 内利著 学习笔记 Python数据分析实战 内利著 学习笔记 Python数据分析实战 内利著 学习笔记 Python数据分析实战 内利著 学习笔记 Python数据分析实战 内利著...
自己总结的R语言数据分析笔记
04-11
自己总结的R语言笔记，适合初学者使用，以下是部分展示 利用 ggplot2 绘折线图 前面我们说过 ggplot2 放置散点图是 ggplot（） + geom_point（）格式，替换折线 图，我们只需要再加上 geom_line（）。在这里说明一下...
【Python】Python中变量或者函数加下划线‘_‘的含义
yangweipeng708的博客
05-14 675
理解这些约定可以帮助Python开发者编写更清晰、更Pythonic的代码，并理解其他Python代码中的命名习惯。）通常用来指示特定的编程约定或用法，这些约定主要关乎变量和函数的可访问性以及预期的使用范围。在Python中，变量或函数前面加一个下划线（
python数据分析numpy基础之intersect1d求数组交集
最新发布
sinat_34735632的博客
05-19 192
python的numpy库的intersect1d(x,y)函数，计算x和y的公共元素，并返回去重后的有序结果。相当于求两个数组中的交集，并且进行去重和排序。numpy.intersect1()查找两个数组的公共元素，并且返回去重后的有序结果。ar1，ar2：必选，列表、元组、数组；如果是多维则自动转一维数组；assume_unique：可选，bool，默认False，若为True则可以加快计算素材，此时ar1和ar2需为元素唯一的数组，否则结果不会去重；
windows11 Django环境安装
云深海阔专栏
05-15 162
3）在这个文件夹中使用manager.py和runserver命令运行开发 web 服务器。2）使用 django-admin 工具创建一个名为“mytestsite”的新框架站点。浏览器上访问http://localhost:800。2、windows10 虚拟环境设置。1、验证python和pip3环境。1）创建文件夹及项目目录。4）web浏览器上验证。3、安装Django。
python数据分析——时间序列
qq_74013365的博客
05-14 1994
时间序列是按照时间顺序排列的一系列随时间变化而变化的数据点或观测值。时间序列可以是离散的，例如每月的销售数据，也可以是连续的，例如气温和股票价格等。时间序列常用于预测和分析未来的趋势，例如经济增长、股票走势、天气变化等。时间序列分析是数据分析中的重要部分，它涉及到对随时间变化的数据进行研究，以揭示其内在规律、趋势和周期性变化。Python作为一种强大的编程语言，拥有众多的数据处理和可视化库，如pandasnumpymatplotlib和seaborn等，这些库在处理时间序列数据时表现出色。
python数据分析学习笔记jupyter book
12-22
Jupyter Notebook是一个非常流行的交互式编程环境，它可以用于编写和执行Python代码，并且支持数据分析和可视化。你可以使用Jupyter Notebook来创建学习笔记，记录你的学习过程和实验结果。 以下是使用Jupyter ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值