2021-02-03

第一次接触爬虫，在看《python3网络爬虫开发实战》
里面有一道爬取猫眼电影排行的实例
试了很多次得到的items都是空列表
不知道问题出在哪
有时候程序一直在运行然后结果一直没显示直至死机
代码如下
在这里插入代码片
import requests
import re
def get_one_page(url):
headers={“user-agent”: “Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko)Chrome/88.0.4324.104 Safari/537.36”}
reponse=requests.get(url,headers=headers)
if reponse.status_code==200:
return reponse.text
return None

def parse_one_page(html):
pattern = re.compile(’

``. ?board-index.?>(. ?).?data-src="(. ?)".?name. ?a.?>(. ?).?star. ?>(.?)

. ?releasetime.?>(. ?).?integer. ?>(.?). ?fraction.?>(. ?).?’,re.S)
items=re.findall(pattern, html)
print(items)

def main():
url=“https://maoyan.com/board/4”
html=get_one_page(url)
parse_one_page(html)

main()