爬虫求助！用bs4库的select函数输出为空怎么办？

最新推荐文章于 2024-03-11 15:44:40 发布

Fernandon

最新推荐文章于 2024-03-11 15:44:40 发布

阅读量1k

点赞数 2

文章标签： python 爬虫

本文链接：https://blog.csdn.net/Fernandon/article/details/117048067

版权

在使用Python的bs4库进行网页抓取时，遇到select函数无法找到目标节点的问题，导致输出为空。针对东方财富网的沪深港通持股页面，尝试获取'今日增持市值第一'的股票名称，具体的tag路径为：#dataview_bkcgmx > div.dataview-center > div.dataview-body > table > tbody > tr:nth-child(1) > td:nth-child(3)。目前该操作返回空结果，寻求爬虫专家的帮助，以便找出问题所在。

摘要由CSDN通过智能技术生成

如题：

用bs4库的select函数搜索目标节点，输出结果为空！！ /(ㄒoㄒ)/~~

有爬虫大佬知道是什么情况吗？请求指点！万分感激！

网站url： 'http://data.eastmoney.com/hsgtcg/list.html'

（是东方财富网的沪深港通持股网页）

tag路径：#dataview_bkcgmx > div.dataview-center > div.dataview-body > table > tbody > tr:nth-child(1) > td:nth-child(3)

（是“今日增持市值第一“的股票名称）

源码：

import requests
from bs4 import BeautifulSoup

url = 'http://data.eastmoney.com/hsgtcg/list.html'
getHtml = requests.get(url)
soup = BeautifulSoup(getHtml.text, "lxml")
targetPath = '#dataview_bkcgmx > div.dataview-center > div.dataview-body > table > tbody > tr:nth-child(1) > td:nth-child(3)'
data = soup.select(targetPath)
print(data)

输出结果：