dataframe中提取所需的多个字段，剔除不需要的多个字段

最新推荐文章于 2023-02-20 10:15:03 发布
最新推荐文章于 2023-02-20 10:15:03 发布
阅读量529 收藏
点赞数
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42956464/article/details/125187819
版权

# 取dataframe字段名方法：

field_all = df.columns # 即df中全量字段

# 设置需剔除的字段

field_eliminate = ['字段1', '字段2', '字段3']

# 判断全量字段中哪些是需剔除字段，返回False

field_slice = [False if field in field_eliminate else True for field in field_all]

# 根据字段剔除判断，提取dataframe中需保留数据

df1 = df.loc[:,field_slice]

qq_42956464
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
R语言dataframe获取每个字段（特征）的数据类型实战：使用sapply函数获取每个字段（特征）的数据类型、通过柱状图可视化特征的种类以及个数
data+scenario+science+insight
10-29 807
R语言dataframe获取每个字段（特征）的数据类型实战：使用sapply函数获取每个字段（特征）的数据类型、通过柱状图可视化特征的种类以及个数 目录 R语言dataframe获取每个字段（特征）的数据类型实战：使用sapply函数获取每个字段（特征）的数据类型、通过柱状图可视化特征的种类以及个数 #仿真数据 #使用sapply函数获取每个字段（特征）的数据类型 #通过柱状图可视化特征的种类以及个数 #仿真数据 set.seed(3221) # this makes the e
pandas移除dataframe字符串数据列中的前N个字符（remove the first n characters from values from column of dataframe)
data+scenario+science+insight
01-11 4660
pandas移除dataframe字符串数据列中的前N个字符（remove the first n characters from values from str column of dataframe）
怎样去除DataFrame字段列名
weixin_44976611的博客
06-28 3526
无摘要
pandas实用技巧1：基于dataframe的多变量/多字段操作
murongweibo1的博客
04-24 3105
1.前言    很多刚接触pandas的不太清楚，怎么进行类似于sql的多字段求和、或者类似于sas的多字段处理，下面举几个例子讲讲pandas如何进行多变量/多字段操作：2.数据准备    首先，造一点数据用于举例：    代码：    import pandas as pd    df = pd.DataFrame([["a1",2,3],["a2",5,6],["b1",5,6]])    ...
python spark dataframe删除字段_pyspark dataframe基本操作看这篇就够了
weixin_30275391的博客
01-28 1727
1 创建dataframe1.1 读取文件创建from pyspark.sql import SparkSession #sparkSession为同统一入口#创建spakr对象spark = SparkSession\.builder\.appName('readfile')\.getOrCreate()# 1.读取csv文件# 1.读取csv文件logFilePath = 'births_tr...
python spark dataframe删除字段_Spark中对DataFrame的基础操作：列增加，列删除，行增加，列名更换，排序等等...
weixin_42317730的博客
03-01 723
可以使用select和selectExpr来操作DataFrame中的列例如查询：DEST_COUNTRY,ORIGIN_COUNTRYval path="/Volumes/Data/BigData_code/data/flight-data/json/2015-summary.json"val dataDF = spark.read.format("json").load(path)val da...
在pandas中一次性删除dataframe的多个列方法
09-20
下面小编就为大家分享一篇在pandas中一次性删除dataframe的多个列方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
python 处理dataframe中的时间字段方法
01-20
在机器学习过程中，通常会通过pandas读取csv文件，保持成dadaframe格式，然而有时候需要对dataframe中的时间字段进行数据建模，比如时间格式为datetime，那么像一般操作dataframe的方式来操作时间字段会报错的，所以...
Python DataFrame设置/更改列表字段/元素类型的方法
12-25
比如笔者想将列表的两个字段由float64设置为int64，那么就要用到DataFrame的astype属性，举例如图： 该例列表为“m_pred_survived”字段为“PassengerId”及“Survived”，设置为int64类型，最后可以输出检验下是否...
利用pandas合并多个excel的方法示例
09-18
当我们需要处理多个Excel文件并将其数据整合到一起时，Pandas提供了一种简单易行的方法。本篇将详细介绍如何利用Pandas来合并多个Excel文件，并通过具体的示例代码进行解释。 首先，我们需要导入Pandas库，它包含了...
python spark dataframe删除字段_如何添加一个新的列到Spark DataFrame(使用PySpark)？
weixin_39531992的博客
12-18 216
我有一个Spark DataFrame(使用PySpark 1.5.1)，并想添加一个新的列。我已经尝试了以下方法，但没有任何成功的：type(randomed_hours) # => list# Create in Python and transform to RDDnew_col = pd.DataFrame(randomed_hours, columns=['new_col'])sp...
【总结】PySpark的DataFrame处理方法：增删改差
weimingyu945的专栏
09-14 2万+
基本操作： 运行时获取spark版本号（以spark 2.0.0为例）： sparksn = SparkSession.builder.appName("PythonSQL").getOrCreate() print sparksn.version 创建和转换格式： Pandas和Spark的
spark Dataframe数据处理常用方法总结
Jacqueline_JIANG的博客
06-23 1820
以下方法使用scala, df类型为Dataframe 1. 新增一列 df = df.withColumn("new col", lit(null)), //新的一列名字为"new col", 使用空值进行填充 2. 列名重新命名 df = df.withColumnRenamed("旧列名", "新列名") 3. 根据条件进行判断来对Dataframe中某列的值进行填充 df = df.withColumn("需要进行填充的列名", when(条件判断, $"用于填充的列名") ..
Python数据分析实战-提取DataFrame（Excel）某列（字段）最全操作（附源码和实现效果）
数据杂坛
02-20 5026
Python数据分析实战-提取DataFrame（Excel）某列（字段）最全操作（附源码和实现效果）
python中 Dataframe 隐藏索引与某些列数据
微信公众号（年更选手）：数据闲逛人 | Github开源项目：数分/数挖study路线 https://github.com/jc-dian/python_data_analysis
10-27 3050
1 隐藏索引 data.style.hide_index() 2 隐藏某些列数据 data.style.hide_columns('月份')
pandas从dataframe中提取多列数据
weixin_44561414的博客
07-08 4807
dataframe提取数据
练习：去除df某列里面字符串里面的空格, .str.strip(); series.str.replace(); df.replace()
ycyrym的博客
03-28 1万+
df[ ].str.strip( ) 先创建带有空格的df: df = pd.DataFrame({'Company':['company A','company B','company C','company A'], 'Sales':['Peter ',' Amy','John ','Mi ke']}) df Out[38]: ...
dataframe中删除某一列或某一行
热门推荐
qz的博客
10-06 10万+
1. 函数 DataFrame.drop(labels=None,axis=0, index=None, columns=None, inplace=False) 参数含义： labels：要删除的行或列，用列表给出 axis：默认为0，指要删除的是行，删除列时需指定axis为1 index ：直接指定要删除的行，删除多行可以使用列表作为参数 columns：直接指定要删除的列，删除多列可以使用列表作为参数 inplace: 默认为False，该删除操作不改变原数据；inplace = True时，改变
sparksql dataFrame 关于列的增删改操作
xnlej的博客
04-26 1万+
最近项目中用到spark和ES的集成，涉及到一系列对dataFrame列的操作，时间主要花在列的增删改上面。整个类采用的是spark+ES+Redis架构，ES存基础数据，redis 存储条件，根据redis的条件从ES筛选出符合条件的记录。val sqlContex = SparkSession.builder().master("local[2]") .appName("spark2ES"...
dataframe groupby多个字段
最新发布
09-09
在 Pandas 中，你可以使用 `groupby` 方法对 DataFrame 进行分组操作，以多个字段进行分组时，可以将这些字段作为 `groupby` 方法的参数传递进去。 以下是一个示例： 假设有一个 DataFrame `df` 包含三个字段：`A`...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值