python做一个本地搜索工具_用Python爬虫写一个简单的小说搜索器!想看啥就搜啥!...

一,前言

调用库:

importrequestsasrtsfrombs4importBeautifulSoupasBpimportre

1

2

3

二,实现

importrequestsasrtsfrombs4importBeautifulSoupasBpimportredefreqdata(key,url):r=rts.post(url,{'searchkey':key})r.raise_for_status()r.encoding=r.apparent_encodingreturnr.textdefhandledata(key,url):re_list=[]soup=Bp(reqdata(key,url),'html.parser')data=soup.find_all('a')foriindata:try:ifre.findall(key,i.text):#根据关键字进行筛选re_list.append(i.text+':'+'http://www.biquge.info'+i['href'])except:continuereturn'\n'.join(re_list)defmain():key=input('请输入关键字:')url="http://www.biquge.info/modules/article/search.php"print(handledata(key,url))returnif__name__=='__main__':main()

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

三,效果

89cf513424b7

### 回答1: 好的,下面是一个简单爬虫脚本,使用 Python 的 requests 和 BeautifulSoup 库来获取百度搜索结果页面中的内容。 ```python import requests from bs4 import BeautifulSoup # 要搜索的关键词 keyword = 'Python' # 构造搜索请求的URL url = f'https://www.baidu.com/s?wd={keyword}' # 发送请求并获取响应 response = requests.get(url) # 解析响应内容 soup = BeautifulSoup(response.text, 'html.parser') # 查找所有的搜索结果标题和链接 results = soup.find_all('h3', class_='t') # 输出搜索结果标题和链接 for result in results: title = result.a.get_text() link = result.a['href'] print(title) print(link) ``` 运行上述代码,即可在控制台中看到搜索结果的标题和链接。注意,由于百度的网页结构可能会随时更改,上述代码可能不适用于所有情况。 ### 回答2: 使用Python一个爬虫脚本获取百度搜索结果的信息是相对简单的任务。首先,我们需要导入相关的模块,如requests和BeautifulSoup。然后,通过发送HTTP请求,获取百度搜索结果页面的内容。接着,使用BeautifulSoup对结果页面进行解析,提取出需要的信息。 下面是一个简单的实现示例: ``` import requests from bs4 import BeautifulSoup def baidu_search(query): url = 'https://www.baidu.com/s' params = {'wd': query} headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'} response = requests.get(url, params=params, headers=headers) if response.status_code == 200: soup = BeautifulSoup(response.text, 'html.parser') results = soup.find_all('div', class_='result') for result in results: title = result.h3.get_text() link = result.h3.a['href'] summary = result.find('div', class_='c-abstract').get_text() print('标题:', title) print('链接:', link) print('摘要:', summary) print('------') # 在这里调用函数,并传入需要查询的关键字 baidu_search('Python爬虫') ``` 这个脚本首先定义了一个`baidu_search`函数,接受用户输入的关键字作为参数。然后,通过构造URL和Headers,发送GET请求获取百度搜索结果页面的内容。接下来,使用BeautifulSoup对页面进行解析,并通过CSS选择器提取标题、链接和摘要等信息。最后,打印出这些信息。 当运行这个脚本并传入关键字"Python爬虫"时,将会输出搜索结果的标题、链接和摘要等信息。当然,你还可以根据自己的需要,进一步对这些信息进行处理或存储。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值