# 将抓取的数据分为不同的类别,将单个数据转换为2D列表以在数据pandas数据帧中使用的方法。
from bs4 import BeautifulSoup
import csv
import re
import pandas as pd
import requests
from time import sleep
from tqdm import tqdm # 显示进度条
url = "https://www.kpaa.or.kr/kpaa/eng/list.do?"
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36'
}
pbar = tqdm(total=100) # 显示进度条,ctrl+alt+t
for page in range(390)<
requests、BeautifulSoup结合pandas.DataFrame将爬取到的多页数据保存到Excel表
最新推荐文章于 2024-05-14 19:24:05 发布