一、PyQuery定位问题
常用的定位方式是:选中——右键“copy”——“copyselector”之后先进行了页面的初始化,初始化正常,但是想要通过以上方式提取列表数据时提取值为空。
二、解决办法
将初始化页面单独拷贝出来,使用默认的路径数据提取为空,改为手动的查找路径,缩短路径查找长度,如下:
browser.get(url)
wait.until(
EC.presence_of_element_located(
(By.CSS_SELECTOR, "body > div.body-wrap > div.main-body > div > div.common-box > div.box-content > ul"))
)
html = browser.page_source
doc = pq(html)
d = doc(
'div.common-box > div.box-content > ul>a:lt(5)')
print(d)
经过测试,手动查找路径后,可以正常提取列表值。