python3.6.3_本课程全部代码python 3.6.3

import re

from bs4 import BeautifulSoup

html_doc = """

The Dormouse's story

The Dormouse's story

Once upon a time there were three little sisters; and their names were

Elsie,

Lacie and

Tillie;

and they lived at the bottom of a well.

...

"""

#soup = BeautifulSoup(html_doc, 'html.parser',from_encoding='utf-8')

soup = BeautifulSoup(html_doc, 'html.parser')

print('获取所有的链接')

links = soup.find_all('a')

for link_node in links:

print(link_node.name, link_node['href'], link_node.get_text())

print('获取Lacie的链接')

link_node = soup.find( 'a', href ='http://example.com/lacie')

print(link_node.name, link_node['href'], link_node.get_text())

print('正则表达式匹配')

link_node = soup.find('a',href = re.compile(r'till'))

print(link_node.name, link_node['href'], link_node.get_text())

print('获取P段落')

p_node = soup.find('p',class_='title')#因为class是python关键字，所以要class属性要写成class_

print(p_node.name, p_node.get_text())