学习爬虫过程遇到的各种问题集锦

用xpath爬取 https://www.ivsky.com/tupian/haiyangshijie/，
问题1：检查了好多遍代码，一直如下错误报错

开始下载 形态各异的海马图片(11张) https://www.ivsky.com/tupian/haima_v50562/
None
Traceback (most recent call last):
  File "20190422ivskyxpath.py", line 59, in <module>
    img_titles1=html1.xpath('//ul[@class="pli"]/li/div/a/@title')
AttributeError: 'NoneType' object has no attribute 'xpath'

后来经过热心的朋友指点， 发现是爬取的图片网站列表里面的这个https://www.ivsky.com/tupian/haima_v50562/ 根本打不开， 最后做了异常判断排除解决。

问题2 ：
下载后保存的图片竟然打不开，后来记事本打开后发现是乱码，加了.decode(‘utf-8’)，也就是resp=requests.get(url,headers=headers).content.decode(‘utf-8’) 解决。
还有一种情况，记得爬取贴吧时一些保存的图片打不开， 用记事本打开发现里面是一些网页的html代码