【爬虫】用Python爬取《Nature》杂志文章的题目、摘要、下载地址
用Python爬取《Nature》杂志文章的题目、摘要、下载地址前言初学python,写了一个爬虫程序练练手。这段代码通过手动输入关键词,爬取自然杂志官网文章题目、摘要和下载地址。由于是国外网站爬虫速度较慢。代码如下import requestsimport reimport ospath = os.path.abspath(os.path.dirname(__file__))def getHTMLText(url): try: #headers = {
原创
2020-08-09 17:58:52 ·
3098 阅读 ·
2 评论