BeautifulSoup/Scrapy/Selenium爬虫框架的不同和使用方法

记录一下几个爬虫框架的区别和使用方法：

Request & BeautifulSoup

最简单基础

使用方法

import requests
from bs4 import BeautifulSoup

for page in range(20):
    url = 'https://www.网址.com/'.format(page)
    req = requests.