python爬虫笔记--编码问题

 
 
import urllib2
import urllib
import requests
from bs4 import BeautifulSoup
url = "https://sh.fang.lianjia.com/loupan/"
respones = requests.get(url).text
soup = BeautifulSoup(respones, 'html.parser')
info = soup.findAll('div', {'class':'resblock-location'}) #info----ResultSet object
for i in info:
# print i.text #'unicode' object 
# print i.text.encode('utf-8')#---- (转为utf-8编码
# c = i.text.split("/") #-----split()方法使用以后,变成list
    print i.text
    

       上为其中一项

    print  i.text.replace('\n', '').replace('/','') #也可使用re.sub 利用正则

 #但是print i.text.split("/"),控制台汉字显示为unicode编码,如下:

    print i.text.split("/")#-----list        split()方法使用以后,str变成 list


原因未知,先记下,下次解决再更新

原因:Python2.7中调用print打印变量X时,操作系统会对变量X做一定的字符处理:如果X是str类型的变量,则直接将X变量交付给终端进行显示;如果X变量是unicode类型,则操作系统首先将X编码成str类型的对象(编码格式取决于stdout的编码格式),然后再交由终端进行显示。在终端显示时,如果str类型的变量的编码方式和终端设置的编码方式不一致,很可能会出现乱码问题。在上面 print i.text 和 print  i.text.replace('\n''').replace('/','') 中,print将i.text等交给操作系统进行转码,编码成str类型,所以可以正常显示中文。而i.text.split()为一个列表,所以print会直接将结果输出,不会交给操作系统编码。

参考:https://www.cnblogs.com/litaozijin/p/6416133.html


 
 
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值