1.python写入文件编码问题
f=open("A.txt","w",encoding="utf-8")
open打开文件的时候添加参数encoding为utf-8
2.注意:使用scrapy爬取中文网站的编码错误。
我的报了错UnicodeEncodeError: 'ascii' codec can't encode characters in position 68-73:ordinal not in range(128)
首先通过命令import syssys.getdefaultencoding()
查看python默认的编码格式。
如果默认编码格式不是utf-8,可使用sys.setdefaultencoding()
设置编码格式,这个网上到处有。
python3不用看默认都是utf-8,如果想要确定一下,也可以去看看咯,我的是linux环境的Python是3.4,此时我爬的网站也是utf-8的编码,然而还是会出现UnicodeEncodeError。
解决办法:使用命令vi ~/.bashrc
(vi使用vi文本编辑器打开,.bashrc文件是环境变量的配置文件)进入这个文件,添加export PYTHONIOENCODING=UTF-8
进去,保存退出之后,使用命令source ~/.bashrc
添加的配置就会生效了。此时再进入执行以上爬取的命令就不会有错了。