python初识爬虫

哈麻闲人

已于 2022-08-04 13:58:49 修改

阅读量150

点赞数

分类专栏： python爬虫文章标签： python 前端 javascript

于 2022-08-04 13:45:49 首次发布

本文链接：https://blog.csdn.net/hgfyyhg/article/details/126157885

版权

python爬虫专栏收录该内容

2 篇文章 0 订阅

订阅专栏

一、

爬虫百度解释：

网络爬虫（又称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。

二、

1.get请求

import requests

query = input("请输入你想查询的内容：")
url = f"https://www.sogou.com/web?query={query}"

header = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3100.0 Safari/537.36"
}

res = requests.get(url, headers=header)

print(res)
print(res.request)
print(res.encoding)

with open('sougou.html', mode="w", encoding='utf-8') as f:
    f.write(res.text)
    f.close()

2.post请求

import requests

url = "https://fanyi.baidu.com/sug"

s = input('请输入您想查询的单词:')

da = {
    'kw': s
}

res = requests.post(url, data=da)
res.close()
res = res.json()

print(res['data'][0]['k']+'的中文翻译为为：')
print(res['data'][0]['v'])