〇、前情提要
在学小甲鱼的爬虫课,遇到反爬虫机制了…
参考:
- 【爬虫篇】《极客Python之效率革命》(小甲鱼)
https://www.bilibili.com/video/av23695737/?p=1 - 爬取豆瓣 TOP250 电影排行榜
https://fishc.com.cn/thread-94979-1-1.html - 豆瓣电影 Top 250
https://movie.douban.com/top250 - [模块档案] Requests 模块帮助文档(小甲鱼版)
https://fishc.com.cn/thread-95893-1-1.html - [模块档案] BeautifulSoup4 帮助文档(小甲鱼版)【更新中】
https://fishc.com.cn/thread-97807-1-1.html - 我的笔记-【爬虫篇】《极客Python之效率革命》(小甲鱼) b站笔记
https://blog.csdn.net/weixin_43210113/article/details/107505405
一、初始源码
import requests
import bs4
res = requests.get("https://movie.douban.com/top250")
soup = bs4.BeautifulSoup(res.text, "html.parser")
targets