爱k歌的陈佳佳博客

白茶清欢无别事,我在等风也等你

Python爬虫实例(一)
1.直接上代码,本爬虫实例是糗事百科网站为URL的
import requests
from bs4 import  BeautifulSoup

url="https://www.qiushibaike.com/"

#获取网站的html文档

def getHtml():

    response=requests.get(url);

    response.encoding="utf-8";

    return response.text

#解析html文档对象,返回soup 对象

def parseHtml(html):

    soup=BeautifulSoup(html);

    #joke_content = soup.select('div.content')[0].get_text()
    joke_content = soup.find_all("div",attrs="content")

    for i in joke_content:
         print (i.get_text())


text=getHtml()

joke=parseHtml(text)
2.运行结果如下所示


阅读更多
个人分类: 爬虫
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

不良信息举报

Python爬虫实例(一)

最多只允许输入30个字

加入CSDN,享受更精准的内容推荐,与500万程序员共同成长!
关闭
关闭