空值过滤——data[data['索引'].notnull()]无法过滤

最新推荐文章于 2022-10-22 07:08:47 发布
最新推荐文章于 2022-10-22 07:08:47 发布
阅读量1.1k 收藏 2
点赞数 2
分类专栏： 数据处理技巧 文章标签： 数据处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shaoqiangaa/article/details/79297466
版权

当用dropna和notnull都不行时，可能数据中出现了''，可以试试data[data['索引']!=''] ，若没有滤空，在试试' '。(中间有空格)。在汉字处理时申请空白字符串，没有被操作直接被放到了数据里。

进行空值处理时，注意空白是‘’还是None，两者形式一致但在代码中不相等，前者是字符串类型，后者是NoneType。在判断等操作中要十分注意。下面是工作中遇到的这种问题。

分类统计也算一类

探究原因：

最终解决方案



shaoqiangaa
关注
专栏目录
03 -2 numpy与pandas中isnull()、notnull()、dropna()、fillna()处理丢失数据的理解与实例
DayDayUp
10-24 3307
引入三剑客 import numpy as np import pandas as pd from pandas import Series,DataFrame 处理丢失数据 1.有两种丢失数据： None: Python自带的数据类型 不能参与到任何计算中 np.nan(NaN): float类型 能参与计算，但结果总是NaN np.nan + 9 结果为：nan ...
讨论B树索引中的 is null/is not null
11-02 1391
为什么在查询中使用IS NULL 或IS NOT NULL同样会限制索引的使用 简答的说因为索引键值不会存储空值 Oracle的CBO并不会因为SQL语句中指定了IS NOT NULL或IS NULL操作就不再使用索引。CBO选择索引的条件只有正确性和代价，只要满足这两个条件就可以了。 测试案例 以dba_objects表的数据建一个测试表为T   create table
[MySQL]date类型设置为NOT NULL时select报错
Balmunc的专栏
03-19 1476
问题： 解决方案： 去掉NOT NULL MySQL版本：
pandas.DataFrame.notnull返回非空值
热门推荐
waiwai3的博客
06-19 3万+
>>> import pandas as pd >>> df = pd.read_csv('test.csv') >>> print df name id 0 ZhangSan 1.0 1 LiSi 2.0 2 WangEr NaN 3 WanZi 4.0 >>&...
mysql data不能为空_数据为空。不能在空值上调用此方法或属性。（使用组合框）...
weixin_30983563的博客
01-27 1096
小编典典当您的一个或多个字段包含NULL(DBNull.Value)时，您将无法对其使用GetString。您需要使用IsDBNull方法检查它们是否为空，然后选择要在文本框中输入的值。通常是一个空字符串private void comboBox1_SelectedIndexChanged(object sender, EventArgs e){string constring = "dataso...
database-添加not null限制
liuyuan_Carrie的博客
11-01 256
You need to add a NOT NULL constraint to the QUANTITY column in the PO_DETAIL table. Which statement should you use to complete this task? 转存失败重新上传取消 ALTER TABLE po_detail MODIFY (quantity NOT NULL); 转存失败重新上传取消 ..
JS判断数据类型以及数据过滤空值方法
FungLeo's Blog
10-25 3215
JS判断数据类型以及数据过滤空值方法 在我们的项目开发中，经常需要对一个传输中的数据进行滤空处理，过滤 null、undefined、''、[]、{}等，还要对字符串进行去除两端的空格操作。为此，我写了一个递归处理方法，代码如下： const toType = obj => { return ({}).toString.call(obj).match(/\s([a-zA-Z]+)/)[1...
data_train = data[pd.notnull(data['count'])].sort_values(by=["datetime"]).reset_index(drop=True) data_test = data[~pd.notnull(data['count'])].sort_values(by=["datetime"]).reset_index(drop=True)
最新发布
05-17
这段代码是将数据集按照时间顺序排序，并将有标签的数据和没有标签...`pd.notnull()`函数是用来判断数据是否为空值的，`sort_values()`函数是用来按照指定列进行排序的，`reset_index()`函数是用来重新设置数据索引的。
data-348025.pdf
02-14
例如，年龄字段可能需要设置为非负整数，可以使用NOT NULL约束防止空值，使用UNIQUE约束保证唯一性，使用FOREIGN KEY约束实现表之间的关联。 **六、备份与恢复** 备份对于数据安全至关重要。在Oracle和MySQL中，都...
业务逻辑中如何更好的处理空值？
zcswl7961的博客
12-24 483
文章目录1 场景2 问题现场2.1 深入listUser研究2.2 深入研究get方法2.3 深入入参 1 场景 存在一个UserSearchService用来提供用户查询的功能: public interface UserSearchService{ List<User> listUser(); User get(Integer id); } 2 问题现场 对于面向对象...
处理空值的几种标准做法
路辉的博客
11-06 2669
1.返回值的空值处理 首先看一下这两个方法 // 获取所有公司 List<User> getAllCompanys(); // 获取指定id的公司 FndCompany get(Long companyId); 那么就迎来几个问题 getAllCompanys方法 公司表如果是空的，那么返回的是空集合还是null？ get方法 如果指定ID的公司不存在，那么返回的是空对象还是null？亦或者直接报错？ 如果信息就像上面一样的话，我们对很多消息不清楚，作为一个不关心方法具体实现
判断DataFrame中的数据是否【不是】缺失值 notnull()
liujingwei8610的专栏
10-22 885
辛苦大家转发时注明出处(也是咱们公益编程交流群的入口网址)，刘经纬老师共享知识相关文件下载地址为：https://liujingwei.cn。C选项：df.notnull()的A列返回：True False。D选项：df.notnull()的B列返回：False True。期待大家提出宝贵建议，互相交流，收获更大，助教：lxy。print("【执行】df.notnull():")B选项：notnull()判断缺失值返回False。A选项：notnull()判断缺失值返回True。【Python-数据分析】
python去除数据集里空格_python pandas消除空值和空格以及 Nan数据替换方法
weixin_39711914的博客
12-04 1556
在人工采集数据时，经常有可能把空值和空格混在一起，一般也注意不到在本来为空的单元格里加入了空格。这就给做数据处理的人带来了麻烦，因为空值和空格都是代表的无数据，而pandas中Series的方法notnull()会把有空格的数据也纳入进来，这样就不能完整地得到我们想要的数据了，这里给出一个简单的方法处理该问题。方法1：既然我们认为空值和空格都代表无数据，那么可以先得到这两种情况下的布尔数组。这里，...
python dataframe drop null值_Python Pandas dataframe.notnull()用法及代码示例
weixin_42314420的博客
01-15 1034
Python是进行数据分析的一种出色语言，主要是因为以数据为中心的python软件包具有奇妙的生态系统。 Pandas是其中的一种，使导入和分析数据更加容易。Pandas dataframe.notnull()功能检测 DataFrame 中的现有/非缺失值。该函数返回一个布尔对象，其大小与其所应用的对象的大小相同，指示每个单独的值是否为na是否有价值。所有非缺失值都映射为true，而缺失值则映射...
sql数据库语言练习，增删改查
11-22 488
数据库创建 DROP DATABASE IF EXISTS `sql_invoicing`; CREATE DATABASE `sql_invoicing`; USE `sql_invoicing`; SET NAMES utf8 ; SET character_set_client = utf8mb4 ; CREATE TABLE `payment_methods` ( `payment_method_id` tinyint(4) NOT NULL AUTO_INCREMENT, ...
数据处理第三章
KklomF_的博客
07-29 356
biji
python dropna()和notnull()用法差别
偏偏的博客
09-01 6421
定义一个DataFrame data = {'a':[1,2,3,NaN],'b':['l','k','j','k'],'c':['12r','45h','45u','456u']} frame1 = DataFrame(data) print(frame1) print('\n') print(frame1.dropna()) print('\n') print(frame1[frame1.no...
day03 数据预处理
健康平安的活着的专栏
02-18 340
# -*- coding: utf-8 -*- # @File : deal_null_demo.py # @Date : 2020-02-18 16:25 # @Author : admin import pandas as pd from sklearn.cluster import KMeans #获取数据的null值 def p_max_min_null(): da...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值