Python3 解决编码问题： UnicodeEncodeError: 'gbk' codec can't encode character '\xa9' in position

最新推荐文章于 2024-05-23 14:55:10 发布
最新推荐文章于 2024-05-23 14:55:10 发布
阅读量2.9w 收藏 13
点赞数 3
分类专栏： Python Python3 大型爬虫项目 编码 爬虫 文章标签： character codec xa9 python 编码
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/github_35160620/article/details/53512967
版权

原博文链接：http://www.aobosir.com/blog/2016/12/08/python3-UnicodeEncodeError-gbk-codec-can’t-encode-character-xa9/

开发环境

  • Python第三方库：lxml、Twisted、pywin32、scrapy
  • Python 版本：python-3.5.0-amd64
  • PyCharm软件版本：pycharm-professional-2016.1.4
  • 电脑系统：Windows 10 64位

如果你还没有搭建好开发环境，请到这篇博客。

当使用Scrapy写爬虫项目的时候，当我们爬取某些中文网站，然后在DOS终端中打印爬取的网页源代码的时候，会出现各式各样的编码错误，今天，我又遇到一种编码错误，下面我将这个错误和对应的解决办法记录下来。

爬取的目标网址：http://blog.csdn.net/github_35160620/article/details/53353672

出现错误的代码：<

最低0.47元/天 解锁文章
AoboSir
关注
  • 3
    点赞
  • 踩
  • 13
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
Python UnicodeEncodeError: 'gbk' codec can't encode character 解决方法
09-22
主要介绍了Python UnicodeEncodeError: 'gbk' codec can't encode character 解决方法,需要的朋友可以参考下
'gbk' codec can't encode character '\xa9' in position 106949: illegal multibyte sequence编码异常
mou kai的博客
08-16 5011
gbk编码错误 网上试了很多方法,直到看到一位大佬说这种是win系统造成的编码错误,所以我把代码放到了linux上面运行,gbk编码异常解决了 但是一直在linux上写代码,个人感觉不是很舒服,然后又找了半天,最终问题得以解决 加入以下代码即可解决 import io import sys sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encod...
【Python解决】第1讲 函数基础篇编写爬虫：提示‘gbk‘ codec can‘t encode character ‘\ue759‘ in position 270720
最新发布
a272329874a的博客
05-23 423
2. 修改 File Encodings 编码为 UTF-8。3. 执行完美解决问题。
UnicodeEncodeError: 'gbk' codec can't encode character u'\xc9' in position 24316: illegal multibyte
Elo的博客
11-30 1296
python 抓取网页时出现如下问题： 解决办法1： 在print语句后面添加 ignore关键字     如我的：print html.encode("gbk","ignore") 解决办法2： 将其转化为GBK编码的超集GB18030 (gbk是GB18030的子集)   如我的：print html.encode("GB18030")   问题得到解决 以上均来自博客：...
解决python3 UnicodeEncodeError: 'gbk' codec can't encode character '\xXX' in position XX
山鬼谣的专栏
11-06 1万+
我的爬虫程序 import urllib.request import http.cookiejar import codecs import io import sys sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='gb18030') #head: dict of header def makeMyOpener(head = {
解决“UnicodeEncodeError: 'gbk' codec can't encode character u'\xa9' in position 24051: illegal multiby...
weixin_30301449的博客
05-24 636
今天我在爬取一个网页时出现了下面这个错误： UnicodeEncodeError: 'gbk' codec can't encode character u'\xa9' in position 24051: illegal multibyte sequence 从这个错误来看应该是编码时出错了，于是我在网上查了些资料，找到了解决方法： source_code.encode('GB1803...
UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position ... 问题解决办法之一
qq_38008452的博客
05-23 3万+
使用Python写文件的时候，或者将网络数据流写入到本地文件的时候，大部分情况下会遇到：UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\xa0’ in position … 这个问题。 网络上有很多类似的文件讲述如何解决这个问题，但是无非就是encode，d...
Python UnicodeEncodeError: ‘gbk’ codec can’t encode character 解决方法
12-25
使用Python写文件的时候，或者将网络数据流写入到本地文件的时候，大部分情况下会遇到：UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\xa0’ in position … 这个问题。 网络上有很多类似的文件...
Python中出现UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\u2022’
12-21
UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\u2022’ in position 7: illegal multibyte sequence Python中打开一个文件夹编写，file1 = open(‘E:\数据挖掘报告.txt’, ‘a’) 在写入的过程中...
Python爬虫初学：报错1：UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\xbb’……
12-22
大家好，我是庞老板咩，一名浙江大学动力工程20级推免生，最近开始自学Python。这是我的第一篇博客，很高兴可以在CSDN这个平台和大家分享交流^ ^ 首先，这是一段我初学爬虫时的代码： import urllib.request def ...
python爬取表格 ‘gbk’ codec can’t encode character ‘\U0001f370’ in position 5: illegal multibyte sequence
12-22
'gbk' codec can't encode character '\U0001f370' in position 5: illegal multibyte sequence 去一看名字我懵逼了是个emoji？？？？ 原来代码是这么写的 设置csv文件位UTF-8,代码改为 for i in b: persons = ...
Python3 解决编码问题： `UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position 10: ille
AoboSir.com
11-26 3万+
Python3 解决编码问题： UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position 10: illegal multibyte sequence — 当执行爬虫将爬取信息打印到终端时出现的编码错误 Python 版本：python-3.5.0-amd64 目标网站：http://blog.csdn.ne
关于requests报错UnicodeEncodeError: ‘gbk‘ codec can‘t encode character的解决，保证和别人的不一样哦
lhys666的博客
10-25 2060
昨天，本菜鸡想摘取（爬 的美名）一些资料，代码如下 import requests url = 'https://blog.csdn.net/jkx521/article/details/100714226' headers = { 'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:80.0) Gecko/20100101 Firefox/80.0' } req = requests.get(url=url, headers=h
python学习疑难1 -- 解决python3 UnicodeEncodeError: 'gbk' codec can't encode character '\xXX' in position X...
weixin_33859231的博客
09-27 370
用python写爬虫程序时，总是出现如下的类似错误： UnicodeEncodeError:'gbk' codec can't encode character '\xa9' in position 0:illegal multibyte sequence 问题： python的print()方法的问题。在python中， print()方法在Win7的默认编码是gbk，它在...
完美解决UnicodeEncodeError: ‘gbk‘ codec can‘t encode character ‘\xa0‘ in position XX: illegal multiby...
Vec_Kun的博客
02-02 5891
方法将Unicode字符转换为正常字符，该方法可算是处理这类情况最好的方法了，它会让字符回归到我们期望看到的样子，同时不损害其它正常的空白字符，而且还能还原其它非空白字符。原因大概就是\xa0的编码方式与gbk不兼容，我使用的Windows系统的txt文件默认是gbk编码的，所以也不存在文本的问题。将字符串分割再重组，这时候空白字符就会被pass掉了，不过该方法杀伤力太大，会导致所有空白消失，一定要慎用。我的解决方法十分暴力，直接用str.replace('old', 'new')来替换。
Python打印时 报错UnicodeEncodeError: 'gbk' codec can't encode character '\xXX' in position
qq_40019973的博客
05-04 2850
网页本身是utf-8,但我们爬取网页时用的是Unicode,但使用print()打印时，里面的内容应该是GBK编码，那么就需要我们将需要打印的数据后加上 .encode(‘GBK’,‘ignore’).decode(‘GBk’) 第一个GBK是忽略掉非法字符,然后再译码 例如： print(需要打印的数据.encode(‘GBK’,‘ignore’).decode(‘GBK’)) ...
UnicodeEncodeError: 'gbk' codec can't encode character ...
热门推荐
小米的博客
11-21 4万+
使用Python写文件的时候，或者将网络数据流写入到本地文件的时候，大部分情况下会遇到：UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position ... 这个问题。 网络上有很多类似的文件讲述如何解决这个问题，但是无非就是encode，decode相关的，这是导致该问题出现的真正原因吗？不是的。 很多时候，我
Python3 解决编码问题： `UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position 10: ille
04-02
在Python3中，解决编码问题可以通过以下几种方式： 1. 使用正确的编码进行字符编码和解码：在处理文本时，确保使用正确的编码进行字符编码和解码操作。常见的编码包括UTF-8、GBK等。如果你遇到了类似于`UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position 10: illegal multibyte sequence`的错误，说明你的代码中存在无法被当前编码处理的字符。 2. 使用合适的编码声明：在Python脚本的开头，可以使用编码声明来指定脚本文件的编码方式。例如，如果你的脚本文件采用UTF- coding: utf-8 -*-`。 3. 使用合适的字符串前缀：在处理特殊字符时，可以使用合适的字符串前缀来指定字符的编码方式。例如，使用`u`前缀表示Unicode字符串，使用`b`前缀表示字节字符串。 4. 使用合适的编码转换函数：Python提供了一些编码转换函数，如`encode()`和`decode()`，可以将字符串从一种编码转换为另一种编码。例如，使用`encode('utf-8')`将字符串转换为UTF-8编码，使用`decode('gbk')`将字符串从GBK编码解码为Unicode。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值