python爬虫获取百度翻译引擎

解析页面
发现是https://fanyi.baidu.ocm/sug/这个网址用post方法传参kw来实现翻译，因此很好捕获，中间很多步能直接简化用requests库实现（用这个方法主要是重温下urllib库）
适合新手入门爬虫

import json
import urllib.request
import urllib.parse
url='https://fanyi.baidu.com/sug/'
headers={'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36 Edg/89.0.774.57'}
# formData={'kw':'perfect'}
while (True):
    
    formData={}
    formData['kw']=input("你想要翻译的单词或句子(退出直接回车):")
    if formData['kw']:
        request=urllib.request.Request(url,headers=headers)
        response=urllib.request.urlopen(request,urllib.parse.urlencode(formData).encode())
        responseData=json.loads(response.read().decode("unicode_escape"))
        showDatas=responseData.get("data")[0].get('v')
        print(showDatas)
    else:
        break

简化后

headers={'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36 Edg/89.0.774.57'}
# formData={'kw':'perfect'}
while (True):
    
    formData={}
    formData['kw']=input("你想要翻译的单词或句子(退出直接回车):")
    if formData['kw']:
        res=requests.post(url,data=formData,headers=headers)
        data=json.loads(res.text)
        
        showDatas=data['data'][0]['v']
        print(showDatas)
    else:
        break

如果对更多的爬虫感兴趣，关注我的公众号，我会不定时更新。