天涯论坛爬贴

最新推荐文章于 2024-10-03 09:02:12 发布

Sonny船长

最新推荐文章于 2024-10-03 09:02:12 发布

阅读量158

点赞数

分类专栏： Python 文章标签： python

本文链接：https://blog.csdn.net/Tony6666_/article/details/109724323

版权

Python 专栏收录该内容

8 篇文章 0 订阅

订阅专栏

import requests
from pyquery import pyquery, PyQuery

#url = 'http://bbs.tianya.cn/hotArticle.jsp?pn=1'
url = 'http://www.allconfs.org/list.asp?yearid=2020'
resp = requests.get(url)
doc = PyQuery(resp.text)

# for item in doc.items('table tbody tr td a')://为了同时拿到标题与作者名  不用该方法
#     print(item)

# 写入csv文件
import csv
csvf = open('C:/Users/Administrator/Desktop/a.csv','a+',encoding='gbk',newline='')
writer = csv.writer(csvf)
writer.writerow(('title','author'))
# print("title","author")
for item in doc.items('table tbody tr'):
    title = item('td').eq(0).text()
    author = item('td').eq(1).text()
    # print(title,author)
    writer.writerow((title, author))
    # print(doc)