UnicodeEncodeError: ‘gbk‘ codec can‘t encode character ‘\xa0‘ in position 46:illegal multibyte .....

最新推荐文章于 2023-06-06 15:47:47 发布

小熊崽子

最新推荐文章于 2023-06-06 15:47:47 发布

阅读量249

点赞数

文章标签： json

原文链接：https://www.cnblogs.com/cwp-bg/p/7835434.html

版权

文章讲述了在使用Python从MongoDB获取包含非ASCII字符的数据时，遇到gbk编码错误的问题。通过设置`ensure_ascii=False`和指定文件以UTF-8编码写入，解决了将数据转换为JSON并写入文件的编码问题。

摘要由CSDN通过智能技术生成

UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position 46:illegal multibyte .....

使用python从mongodb获取数据，并打包成json格式时，出错。转载自https://www.cnblogs.com/cwp-bg/p/7835434.html
源代码如：

json_str = json.dumps(data, indent=4, cls=DateEncoder, ensure_ascii=False) 
with open('G:/ALL_NEWS/ALL_Belta/{}2022.json'.format(COLLECTION_NAME), 'w') as json_file:
        json_file.write(json_str)

使用ensure_ascii=False，还是出错。当源数据为俄文，报UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\xa0’ in position 46:illegal multibyte …
这是在文件写入的时候报的错误，而万恶的windows打开文件默认是以“gbk“编码的，将代码修改成指定utf-8编码格式打开文件

json_str = json.dumps(data, indent=4, cls=DateEncoder, ensure_ascii=False)
with open('G:/ALL_NEWS/ALL_Belta/{}2022.json'.format(COLLECTION_NAME), 'w', encoding="utf-8") as json_file:
        json_file.write(json_str)