Python之pandas（二）

已于 2022-04-05 15:28:31 修改
阅读量1.7k 收藏 11
点赞数 1
分类专栏： 数据分析学习 文章标签： python 数据分析 jupyter
于 2022-04-02 22:41:07 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46555054/article/details/123930371
版权

Python之pandas（二）

文章目录

环境：jupyter Notebook(Anaconda)

1.引入pandas库和numpy库
import pandas as pd  
import numpy as np
2. 读取文件信息
file=open('D:/北京地区信息.csv')
file_data=pd.read_csv(file)      #读取文件信息
file_data

在这里插入图片描述

file1=open('D:/天津地区信息.csv')
file1_data=pd.read_csv(file1)
file1_data

在这里插入图片描述

3. duplicated函数

重复值的检查和处理


                

                
                
        

        

    




        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  陌小柠
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                    1
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    11
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                  2
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          










                



	

		

			

				
					
Python数据分析与处理——处理中国地区信息

				
			

			

				

					qq_46258465的博客
				

				

					12-27
					
					3592
					
				

			

		

		

			
				
预处理地区信息
2.1数据的爬取
代码：
import pandas as pd

data=pd.read_csv("example_data.csv",header=1)

print(data)

data1=pd.read_csv("北京地区信息.csv",header=1,encoding='gbk')

data2=pd.read_csv("天津地区信息.csv",encoding='gbk')

print(data1)

print(data2)

 

代码运行结果：

首先使用panda

			
		

	



                

              
                



	

		

			

				
					
csv各地区天气数据集，新手练习

				
			

			

				

					10-21
				

			

		

		

			
				
北京/上海/广东，各区的分时天气数据

id 记录ID
province 省份名
city 城市名
adcode 区域编码
weather 天气现象(汉字描述)
temperature 实时气温，单位：摄氏度
winddirection 风向描述
windpower 风力级别，单位：级
humidity 空气湿度
reporttime 发布时间
create_time 插入时间

数据分析练手

			
		

	



                


  
              

                


	

		

			

				
					
利用Pandas进行数据预处理的一个简单小案例

				
			

			

				

					丶水溶C的博客
				

				

					07-26
					
					1929
					
				

			

		

		

			
				
利用Pandas进行数据预处理的一个简单小案例。用户行为数据预处理。

			
		

	





	

		

			

				
					
案例二 预处理部分地区信息

				
			

			

				

					weixin_51704612的博客
				

				

					05-05
					
					645
					
				

			

		

		

			
				
案例需求

1.检查重复并且处理重复数据
2.检查缺失值
3.检查异常值
4.合并两个文件

			
		

	



		

			
		



	

		

			

				
					
【大数据处理与可视化】四、数据预处理

				
			

			

				

					慢热型网友的博客
				

				

					05-03
					
					2224
					
				

			

		

		

			
				
预处理部分地区信息：给定北京和天津地区的统计信息，这些数据中都或多或少的存在一些问题，如重复的数据、缺失的数据。请使用Pandas对爬取的数据进行预处理操作，具体包括：检查重复数据，一旦发现有重复的数据，就需要将其进行删除。检查异常，一旦发现数据中存在异常，通常先要对原始数据进一步确认，如果是错误的数值，则直接使用正确的数值进行替换。通过本次实验，我能熟练运用数据清洗的常见操作检查和处理各类有问题的数据，其中包括重复值的查询和处理，缺失值的查询和处理，基于three_sig和基于箱型图的异常值的查询处理。

			
		

	





	

		

			

				
					
pandas案例——预处理部分地区数据

				
			

			

				

					CarveStone的博客
				

				

					01-18
					
					1831
					
				

			

		

		

			
				
数据清洗的任务是过滤那些不符合要求的数据，将过滤的结果交给业务主管部门，确认是否过滤掉还是由业务单位修正之后再进行抽取。不符合要求的数据主要是有不完整的数据、错误的数据、重复的数据三大类。

			
		

	





	

		

			

				
					
【全国重点城市POI数据】-北京数据-公共设施.csv

				
			

			

				

					04-26
				

			

		

		

			
				
【全国重点城市POI数据】-北京数据-公共设施

			
		

	





	

		

			

				
					
如何使用python中读取csv数据文件？读取csv文件的几种方法

					
热门推荐

				
			

			

				

					跬步Python股票数据量化分析
				

				

					08-13
					
					1万+
					
				

			

		

		

			
				
1.第一种方法，使用csv库，打开csv文件，然后逐行读取文件内容


import csv
filename = 'abc.csv'
with open(filename) as f:
    reader = csv.reader(f)
    header_row = next(reader)
    
    highs = []
    for row in reader:
        print(highs)

这里header_row读取的是csv文件中的第一行，highs存储所有的数据行

			
		

	





	

		

			

				
					
seaborn

				
			

			

				

					あずにゃん梓喵的博客
				

				

					08-15
					
					1394
					
				

			

		

		

			
				
日萌社

人工智能AI：Keras PyTorch MXNet TensorFlow PaddlePaddle 深度学习实战（不定时更新）

1.1 Seaborn----绘制统计图形

Matplotlib虽然已经是比较优秀的绘图库了，但是它有个今人头疼的问题，那就是API使用过于复杂，它里面有上千个函数和参数，属于典型的那种可以用它做任何事，却无从下手。

Seaborn基于 Matplo...

			
		

	





	

		

			

				
					
Python之 Pandas数据处理

				
			

			

				

					01-24
				

			

		

		

			
				
在Python的世界里，Pandas库是进行数据处理和分析的核心工具，尤其适合初学者和专业人士。Pandas提供了高效且易用的数据结构，如DataFrame和Series，使得数据操作变得简单直观。  1. **Pandas库的安装与数据读写**  ...

			
		

	





	

		

			

				
					
beijing25.csv

				
			

			

				

					08-16
				

			

		

		

			
				
北京10到14年PM2.5数据


			
		

	





	

		

			

				
					
beijing-CSV格式天气数据.zip

				
			

			

				

					03-10
				

			

		

		

			
				
beijing_20200101-20200307
CSV格式的天气数据

			
		

	





	

		

			

				
					
2018年北京积分落户数据分析.csv

				
			

			

				

					05-02
				

			

		

		

			
				
2018年北京积分落户数据分析
对招聘⽹站上“数据分析”这⼀职位的招聘情况做分析 提示：
职位地区分布
⼯资待遇
⼯作年限要求
技术能⼒要求

			
		

	





	

		

			

				
					
全国城市地区CSV数据库

				
			

			

				

					10-02
				

			

		

		

			
				
非常全的全国城市地区CSV数据库，一级为中国，包含全国的所有省、市、县、区，适用于网店城市分类信息导入。

			
		

	





	

		

			

				
					
Python之Pandas知识点

				
			

			

				

					02-24
				

			

		

		

			
				
很多人都分不清Numpy，Scipy，pandas三个库的区别。在这里简单分别一下：NumPy：数学计算库，以矩阵为基础的数学计算模块，包括基本的四则运行，方程式以及其他方面的计算什么的，纯数学；SciPy：科学计算库，有一些...

			
		

	





	

		

			

				
					
python之pandas用法大全

				
			

			

				

					09-20
				

			

		

		

			
				
本文讲解了python的pandas基本用法，大家可以参考下

			
		

	





	

		

			

				
					
Python3.7Pandas离线包

				
			

			

				

					07-13
				

			

		

		

			
				
Python3.7Pandas离线包

			
		

	





	

		

			

				
					
利用python + pyecharts+Pandas对北上广深等城市进行租房数据分析

				
			

			

				

					小肥柴YD的博客
				

				

					07-05
					
					5178
					
				

			

		

		

			
				
本次分析的租房数据主要来源于上一篇博客中获取的“房天下”网站租房信息，对该数据分析主要使用了Pandas数据处理库。

			
		

	





	

		

			

				
					
Python怎么去获取csv文件的内容？Python读取csv文件的方法

				
			

			

				

					xiangxueerfei的博客
				

				

					09-15
					
					6209
					
				

			

		

		

			
				
在生活和工作之中，许多表格格式的数据都会保存成csv格式的文件以便于去更快的读取，那么在python之中也可以去通过某些方法读取csv文件的内容。我们学习Python必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有阿里大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。最后祝大家天天进步！

			
		

	





	

		

			

				
					
Python的pandas

					
最新发布

				
			

			

				

					05-23
				

			

		

		

			
				
Python的pandas是一个开源的数据分析和处理库，它提供了快速、灵活和高效的数据结构，以及数据分析工具。pandas最初是由Wes McKinney在2008年创建的，目的是为了解决实际数据分析中遇到的问题。

pandas提供了两种主要的数据结构：Series和DataFrame。Series是一种一维数组对象，类似于一个带有标签的NumPy数组。DataFrame是一个二维表格数据结构，由行和列组成，类似于Excel表格或SQL表格。

pandas具有许多功能，包括读取和写入各种文件格式（例如CSV、Excel、SQL等），数据清洗、合并和重塑，时间序列分析和统计分析等。它还可以与其他Python库（如NumPy、Matplotlib）一起使用，提供了更强大的数据分析和可视化功能。

			
		

	



              



  
“相关推荐”对你有帮助么？

  

      
    
          
  • 
              
    
                  
                  
              
    
              
    非常没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    一般
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    有帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    非常有帮助
    
          
    • 
      

      

      

          
          提交
      

      

  




          




        



    





    



      

      

        
      

      





	

		
评论 2

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值