读取pkl文件出现的报错问题以及解决办法

最新推荐文章于 2024-07-14 22:18:32 发布
最新推荐文章于 2024-07-14 22:18:32 发布
阅读量853 收藏 10
点赞数 7
文章标签： pandas python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cthluth/article/details/134758950
版权
文章讲述了作者在读取pkl文件时遇到的问题，主要涉及pandas版本不匹配导致的读取失败。解决办法是确保生成文件的Python和pandas版本与当前环境一致，作者最后提到低版本pandas可能与高版本不兼容。
摘要由CSDN通过智能技术生成

读取pkl文件失败

导师给了一个小任务，让先读取一个地名pkl文件，然后提取地名并进行翻译。结果在读取阶段就出现问题。

问题一：

在网上查阅后发现是因为环境中的pandas版本过高的原因。因为现在运行文件的电脑的pandas版本与生成文件的电脑pandas版本不用导致的错误。具体原因就是不同的pandas版本可能序列化与反序列化的解码不同，导致的在解读二进制pkl文件失败。第一次遇到这个我在我的anaconda环境中降低了我的pandas版本。

问题二：

在解决完上述问题后，出现了下面的问题。再去查阅后给出的答案就是生成文件电脑的python版本与pandas版本与我的电脑的python版本与pandas版本不同。但是一开我并不清楚生成文件的版本，然后就去问老师，老师说用python3.9版本，没说用什么版本的pandas版本。

然后我就在anaconda中创建新的虚拟环境用的python3.9，就可以正常读取文件内容。

 

 

总结
 

针对问题一，降低了pandas版本可以解决，但是并未彻底解决。
 

针对问题二，则是统一了python版本。将我的环境中的python统一为python3.9。但是pandas版本未统一，我选择安装了1.2.1版本的pandas。因为一开始用的pandas2.0.3版本无法运行，我猜测应该是低版本的可以兼容但是高版本的无法兼容。
 

问题一：我的环境:python3.8+pandas2.0.1后更改为：python3.8+pandas1.5.3
 

问题二：我的环境：python3.8+pandas2.0.3更改为：python3.9+pandas1.2.1
 

 

所以大家在进行pkl文件读取时，一定要至少保证生成文件电脑的python版本与自己电脑的python版本保持一致，pandas至少不高于生成文件的版本。
 

 


                

        

        

    




    

      

        

            

              
                
                  cthluth
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                    7
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    10
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                  2
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      










                



	

		

			

				
					
Python读取pkl文件

				
			

			

				

					a18852867035的博客
				

				

					02-27
					
					1万+
					
				

			

		

		

			
				
使用python读取pkl文件内容可能会出现一些错误，下面将介绍一些解决的方法。
import cPickle
f=open('subj0.pkl')#文件所在路径
inf=cPickle.load(f)#读取pkl内容
print inf
f.close()


有时候，还是出现错误EOFEORROR，可以通过合并第2,3行,即：
inf=cPickle.load(open('subj

			
		

	



                

              
                



	

		

			

				
					
解决Python 写文件报错TypeError的问题

				
			

			

				

					12-16
				

			

		

		

			
				
为了解决这个问题，我们需要以二进制模式('wb')打开文件。二进制模式允许我们将字节数据写入文件，这对于处理像图片或从网络上传的其他非文本数据至关重要。修改后的代码如下：  ```python f1 = request.FILES['pic'...

			
		

	



                


  
              

                


	

		

			

				
					
Python读取mnist.pkl文件（填坑记）

				
			

			

				

					
				

				

					10-05
					
					2215
					
				

			

		

		

			
				
使用python读取mnist.pkl文件的过程中出现如下所示错误



下面是为修改之前的代码


import pickle
f = open(r'D:\python-workspace\Neural_Network\dataset\mnist.pkl') # 读取文件
info = pickle.load(f) # 加载文件
print(info)   #打印

仔细分析下原因主要是我们读取的文件是二进制，所以需要在读取文件的open（）函数里面修改下，代码如下


import pickle
f =

			
		

	





	

		

			

				
					
生成.pkl文件，读取.pkl文件的内容

				
			

			

				

					qq_41289353的博客
				

				

					08-04
					
					3466
					
				

			

		

		

			
				
无

			
		

	



		

			
		



	

		

			

				
					
打开pkl文件提示解码错误解决方法

				
			

			

				

					qq_45049500的博客
				

				

					07-10
					
					2564
					
				

			

		

		

			
				
python打开pkl文件时的编解码问题解决方法

			
		

	





	

		

			

				
					
xgb模型加载老版本模型 pkl 文件不同依赖版本不兼容，不重新拟合模型，直接将pkl文件格式转换bin文件，用于模型部署

				
			

			

				

					Tunac
				

				

					04-06
					
					9150
					
				

			

		

		

			
				
模型pkl 文件不同依赖版本不兼容，不重新拟合模型，直接将pkl文件格式转换bin文件，用于模型部署。在新的环境中生成模型文件。

			
		

	





	

		

			

				
					
读取pkl文件报错_pickle.UnpicklingError: A load persistent id instruction was encountered

				
			

			

				

					mtj66的博客，交流WX:SpringBreeze1104
				

				

					06-25
					
					559
					
				

			

		

		

			
				
报错的原因可能有好几种，我这里是因为文件格式不是pickle格式，而是parquet格式的。改成pd.read_parquet()即可。

			
		

	





	

		

			

				
					
打开pkl文件之-安装pycharm安装pandas

				
			

			

				

					ruijieli_的博客
				

				

					06-20
					
					3653
					
				

			

		

		

			
				
打开pkl文件之-安装pycharm安装pandas
开心地开启了毕业设计旅程，这里记录一下每一步。
为了打开pkl文件费周章。首先pkl文件是python自生成的文件。下载pycharm的community版本（这里网上大部分都有详细教程不再赘述）。
打开pkl文件的代码：
import pickle
f = open(‘test.pkl’,‘rb’)
data = pickle.load(f)
print(data)
这里会报错，原因是没有安装pandas。
那么绕回了安装pandas包的问题，我在网上

			
		

	





	

		

			

				
					
python 3.7版本 打不开 python 3.8 保存的pickle文件

				
			

			

				

					qq_42077364的博客
				

				

					08-03
					
					1093
					
				

			

		

		

			
				
最近有一个pickle文件，当我使用python3.7 读取的时候报错 ValueError: unsupported pickle protocol: 5   查找原因发现是原始文件是用高版本的python解释器（比如3.8）保存的。我们使用3.8 的解释器将该pickle文件读取出来。在重新保存一遍，保存的时候，添加一个参数。最后就可以使用低版本的解释器打开。

			
		

	





	

		

			

				
					
python3.9安装和pandas安装踩坑处理

				
			

			

				

					quantam的博客
				

				

					02-16
					
					3601
					
				

			

		

		

			
				
python3.9安装和第三方包安装，异常处理

			
		

	





	

		

			

				
					
KITTI数据集pkl文件解析txt

				
			

			

				

					05-19
				

			

		

		

			
				
本文件是将kitti数据集产生的pkl数据解析成txt文件，pkl里面的数据其实就是障碍物检测的实际信息，转换成txt后方便大家阅读 。

			
		

	





	

		

			

				
					
python 解压pkl文件的方法

				
			

			

				

					09-20
				

			

		

		

			
				
今天小编就为大家分享一篇python 解压pkl文件的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧

			
		

	





	

		

			

				
					
pkl与json文件格式转换

				
			

			

				

					02-07
				

			

		

		

			
				
将.pkl文件转换为.json文件

			
		

	





	

		

			

				
					
python3的pickle保存pkl文件用python2打开出错

				
			

			

				

					qq_31629761的博客
				

				

					04-12
					
					1623
					
				

			

		

		

			
				
ValueError: unsupported pickle protocol: 3

出现该问题说明是在python2环境下想打开原本在python3下pickle保存的文件

解决这个问题的方式是：在原先python3环境下保存的时候改变pickle.dump()中protocol 参数为2

比如：


path  = './file.pkl'
with open(path,'wb') as...

			
		

	





	

		

			

				
					
pickle 文件与不同版本的Python

				
			

			

				

					AcceptedLin的博客
				

				

					12-03
					
					3241
					
				

			

		

		

			
				
                          pickle 文件与不同版本的Python

 


import pickle
testpkl = pickle.loads(open("test.pickle", "rb").read())

在读取一个 pickle 文件时, 由于刚开始未知其是有 python2 还是 python3 的 pickle 库保存的, 在 python2 环境...

			
		

	





	

		

			

				
					
尝试打开同学给的pkl文件，但是报错，怎么破？

				
			

			

				

					pdcfighting的博客
				

				

					03-30
					
					972
					
				

			

		

		

			
				
点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤君问归期未有期，巴山夜雨涨秋池。大家好，我是Python进阶者。一、前言前几天在Python白银交流群【YVONNE????】问了一个pkl文件打开报错的问题。请教各位，我尝试打开同学给的pkl文件，但是报错AttributeError: Can't get attribute '_unpi...

			
		

	





	

		

			

				
					
如何打开.pkl文件，查看.pkl文件里的内容（Python3.6）

					
热门推荐

				
			

			

				

					weixin_39450145的博客
				

				

					03-16
					
					7万+
					
				

			

		

		

			
				
1. show_pkl.py：


#show_pkl.py

import pickle
path='aus_openface.pkl'   #path='/root/……/aus_openface.pkl'   pkl文件所在路径
	   
f=open(path,'rb')
data=pickle.load(f)

print(data)
print(len(data))

2. 运行命令...

			
		

	





	

		

			

				
					
如何打开pkl文件

				
			

			

				

					LemonTree_Summer的博客
				

				

					08-21
					
					6591
					
				

			

		

		

			
				

import cPickle as pickle
path = '/root/……/aus_openface.pkl'
f = open(path)
data = pickle.load(f)
print data
print len(data)

 

			
		

	





	

		

			

				
					
《JavaSE》---6.＜基础语法（Java三大程序控制结构）＞

					
最新发布

				
			

			

				

					m0_73456341的博客
				

				

					07-14
					
					820
					
				

			

		

		

			
				
本篇博客主要讲解Java基础语法中的三大结构，一种顺序结构、两大分支结构i（if-else、swich-case）、四大循环结构（while、do while、fot、foreach）

			
		

	





	

		

			

				
					
解决python读取pkl文件版本低的问题

				
			

			

				

					04-26
				

			

		

		

			
				
好的，您的问题是如何解决Python读取Pkl文件版本低的问题。为了解决这个问题，您可以尝试使用pickle模块中的"pickle.HIGHEST_PROTOCOL"参数，它将始终使用最新的pickle协议版本来写入和读取pkl文件。如果您需要向后兼容旧版本，则可以使用较旧的pickle协议版本参数。此外，您还可以尝试手动将pickle协议版本指定为较旧的版本。希望这可以帮助您解决您的问题。

			
		

	



              



  
“相关推荐”对你有帮助么？

  

      
    
          
  • 
              
    
                  
                  
              
    
              
    非常没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    一般
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    有帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    非常有帮助
    
          
    • 
      

      

      

          
          提交
      

      

  




          




        



    





    



      

      

        
      

      





	

		
评论 2

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值