爬取彼岸netbian图片

**问题一：**只能读出部分信息
刚开始爬取只能爬出来前两张图片的信息，从第三张就开始报错

原因是这个网址的第三张图片是一个有er围马的图片

虽然html里面alt 和 src 看着正常但是和别的图片的读出来却不同
在这里就用try … except…来处理，跳过第三张。
**问题二：**读取的中文用utf-8仍然乱码

按照网上通用的改法发现它不报错，但是打印不出结果了

此时我改动了utf-8为gbk
res.encoding = ‘gbk’
然后就可以了

接下来将爬取的数据存入一个文件夹
完整代码如下：

import requests
from lxml import etree
import os
if __name__ == '__main__':
    url = 'http://www.netbian.com/fengjing/'
    headers = {
        'User-Agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.107 Mobile Safari/537.36'}
    res = requests.get(url, headers=headers)
    res.encoding = 'gbk'
    html = res.text
    tree = etree.HTML(html)
    div = tree.xpath('///div[@class="list"]/ul/li')
    if not os.path.exists('./pictureLib'):
        os.makedirs('./pictureLib')
    for li in div:
        try:
            img_alt = li.xpath('./a/img/@alt')[0]+'.jpg'
            img_src = li.xpath('./a/img/@src')[0]
            #print(img_alt, img_src)
        except:
            pass
        img_data=requests.get(url=img_src,headers=headers).content
        img_path='pictureLib/'+img_alt
        with open(img_path,'wb') as f:
            f.write(img_data)
            print(img_alt,'下载成功！！！')

最终结果：


已经将网上的图片爬取并存入我的电脑E盘下了