book_urls = []
index = requests.get(“http://www.daomubiji.com/”)
soup = BeautifulSoup(index.content.decode(“utf8”), ‘lxml’)
articles = soup.find_all(“article”, class_=‘article-content’)
for article in articles:
links = article.find_all(‘a’, href=re.compile(“dao-mu-bi-ji”))
for link in links:
book_urls.append(link[“href”])
return book_urls
# 获取每章的链接
def get_chapter_urls(url):
chapter_urls = []
page = requests.get(url)
soup = BeautifulSoup(page.content.decode(“utf8”), “lxml”)
articles = soup.find_all(“article”, class_=“excerpt excerpt-c3”)
for article in articles:
chapter_urls.append(article.a[“href”])
return chapter_urls
# 获取每章的内容
def get_content(url):
content = “”
page = requests.get(url)
soup = BeautifulSoup(page.content.decode(“utf8”), “lxml”)
title = soup.find_all(“h1”, class_=“article-title”)[0].string
content += (“\n” + title + “\n\n”)
articles = soup.find_all(“article”, class_=“article-content”)
for article in articles:
ps = article.find_all(‘p’)
for p in ps:
for string in p.strings:
content = content + string + “\n”
return content
# 获取全本《盗墓笔记》并保存到文件
def get_article(url):
print(1)
book_urls = get_book_urls(url)
print(1)
chapter_urls = []
for url in book_urls:
print(1)
# url = “http://www.daomubiji.com/dao-mu-bi-ji-2”
chapter_urls.extend(get_chapter_urls(url))
print(chapter_urls)
result = “”
for chapter_url in chapter_urls:
content = get_content(chapter_url)
result += content
print(content)
with open(“daomubiji.txt”, “a”) as f:
f.write(result.encode(“utf8”))
get_article(“http://www.daomubiji.com/”)
2.粽子分析
依稀记得书中的粽子种类繁多
-
大粽子:厉害的僵尸、恶鬼之类的东西
-
老粽子:可发生尸变的不好对付的僵尸
-
干粽子:是指墓里的尸体烂得只剩下一堆白骨了。
-
肉粽子:是指尸体身上值钱的东西多。
-
血粽子:血尸墓中的粽子,最厉害。
-
霉粽子:是指具有尸毒的尸体。
-
女粽子:女尸尸化后的粽子,比普通粽子更厉害
这里把前三本书中出现“粽子”的每句话给提取出来,并生成一张词云图来展示一下粽子的味道,可以看到四字的拆分比两字拆分描述得更深刻一些
4字分词
代码如下:
import jieba
from wordcloud import WordCloud,ImageColorGenerator
from matplotlib import pyplot as plt
from PIL import Image
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。
深知大多数同学面临毕业设计项目选题时,很多人都会感到无从下手,尤其是对于计算机专业的学生来说,选择一个合适的题目尤为重要。因为毕业设计不仅是我们在大学四年学习的一个总结,更是展示自己能力的重要机会。
因此收集整理了一份《2024年计算机毕业设计项目大全》,初衷也很简单,就是希望能够帮助提高效率,同时减轻大家的负担。
既有Java、Web、PHP、也有C、小程序、Python等项目供你选择,真正体系化!
由于项目比较多,这里只是将部分目录截图出来,每个节点里面都包含素材文档、项目源码、讲解视频
如果你觉得这些内容对你有帮助,可以添加VX:vip1024c (备注项目大全获取)
(img-m6tkpXfK-1712530900776)]
既有Java、Web、PHP、也有C、小程序、Python等项目供你选择,真正体系化!
由于项目比较多,这里只是将部分目录截图出来,每个节点里面都包含素材文档、项目源码、讲解视频
如果你觉得这些内容对你有帮助,可以添加VX:vip1024c (备注项目大全获取)
[外链图片转存中…(img-6NDD9LDf-1712530900777)]