深度有趣 | 03 高端又一般的词云

简介

词云是一种数据呈现方式

  • 不会的时候,感觉很厉害、很高大上
  • 会用了之后,感觉到哪都看到别人在用

掌握用Python实现词云的方法

准备

安装包

pip install wordcloud matplotlib jieba PIL
复制代码

准备一些文本,英文或中文皆可

一个简单的例子

WordCloud()可选的参数

  • font_path:可用于指定字体路径,包括otfttf
  • width:词云的宽度,默认为400
  • height:词云的高度,默认为200
  • mask:蒙版,可用于定制词云的形状
  • min_font_size:最小字号,默认为4
  • max_font_size:最大字号,默认为词云的高度
  • max_words:词的最大数量,默认为200
  • stopwords:将被忽略的停用词,如果不指定则使用默认的停用词词库
  • background_color:背景颜色,默认为black
  • mode:默认为RGB模式,如果为RGBA模式且background_color设为None,则背景将透明
# -*- coding: utf-8 -*-

from wordcloud import WordCloud
import matplotlib.pyplot as plt

# 打开文本
text = open('constitution.txt').read()
# 生成对象
wc = WordCloud().generate(text)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis('off')
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

由于英文单词之间有空格分隔,因此大多不需要额外的处理

中文词云

中文一般需要经过分词处理,先看下不分词的效果

以《西游记》为例,可以看到结果中会出现各种双字、三字和四字等,但很多并不是合理的词语

# -*- coding: utf-8 -*-

from wordcloud import WordCloud
import matplotlib.pyplot as plt

# 打开文本
text = open('xyj.txt').read()
# 生成对象
wc = WordCloud(font_path='Hiragino.ttf', width=800, height=600, mode='RGBA', background_color=None).generate(text)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis('off')
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

这次我们先用jieba进行中文分词,可以看到生成的词云里,基本上都是合理的词语了

# -*- coding: utf-8 -*-

from wordcloud import WordCloud
import matplotlib.pyplot as plt
import jieba

# 打开文本
text = open('xyj.txt').read()

# 中文分词
text = ' '.join(jieba.cut(text))
print(text[:100])

# 生成对象
wc = WordCloud(font_path='Hiragino.ttf', width=800, height=600, mode='RGBA', background_color=None).generate(text)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis('off')
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

使用蒙版

这里将mask翻译为蒙版,是因为感觉它和Photoshop中蒙版的作用很类似

使用蒙版之后,可以根据提供的蒙版图片,生成指定形状的词云

# -*- coding: utf-8 -*-

from wordcloud import WordCloud
from PIL import Image
import numpy as np
import matplotlib.pyplot as plt
import jieba

# 打开文本
text = open('xyj.txt').read()

# 中文分词
text = ' '.join(jieba.cut(text))
print(text[:100])

# 生成对象
mask = np.array(Image.open("black_mask.png"))
wc = WordCloud(mask=mask, font_path='Hiragino.ttf', mode='RGBA', background_color=None).generate(text)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis("off")
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

颜色

词云的颜色可以从蒙版中抽取,使用ImageColorGenerator()即可

# -*- coding: utf-8 -*-

from wordcloud import WordCloud, ImageColorGenerator
from PIL import Image
import numpy as np
import matplotlib.pyplot as plt
import jieba

# 打开文本
text = open('xyj.txt').read()

# 中文分词
text = ' '.join(jieba.cut(text))
print(text[:100])

# 生成对象
mask = np.array(Image.open("color_mask.png"))
wc = WordCloud(mask=mask, font_path='Hiragino.ttf', mode='RGBA', background_color=None).generate(text)

# 从图片中生成颜色
image_colors = ImageColorGenerator(mask)
wc.recolor(color_func=image_colors)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis("off")
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

当然也可以设置为纯色,增加一个配色函数即可

# -*- coding: utf-8 -*-

from wordcloud import WordCloud
from PIL import Image
import numpy as np
import matplotlib.pyplot as plt
import random
import jieba

# 打开文本
text = open('xyj.txt').read()

# 中文分词
text = ' '.join(jieba.cut(text))
print(text[:100])

# 颜色函数
def random_color(word, font_size, position, orientation, font_path, random_state):
	s = 'hsl(0, %d%%, %d%%)' % (random.randint(60, 80), random.randint(60, 80))
	print(s)
	return s

# 生成对象
mask = np.array(Image.open("color_mask.png"))
wc = WordCloud(color_func=random_color, mask=mask, font_path='Hiragino.ttf', mode='RGBA', background_color=None).generate(text)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis("off")
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

关于HSL配色方案可以参考

www.w3.org/wiki/CSS3/C…

精细控制

如果希望精细地控制词云中出现的词,以及每个词的大小,可以尝试generate_from_frequencies(),包括两个参数

  • frequencies:一个字典,用于指定词和对应的大小
  • max_font_size:最大字号,默认为None

generate() = process_text() + generate_from_frequencies()

以下用jieba提取出关键词和权重,再以此绘制词云

# -*- coding: utf-8 -*-

from wordcloud import WordCloud, ImageColorGenerator
from PIL import Image
import numpy as np
import matplotlib.pyplot as plt
import jieba.analyse

# 打开文本
text = open('xyj.txt').read()

# 提取关键词和权重
freq = jieba.analyse.extract_tags(text, topK=200, withWeight=True)
print(freq[:20])
freq = {i[0]: i[1] for i in freq}

# 生成对象
mask = np.array(Image.open("color_mask.png"))
wc = WordCloud(mask=mask, font_path='Hiragino.ttf', mode='RGBA', background_color=None).generate_from_frequencies(freq)

# 从图片中生成颜色
image_colors = ImageColorGenerator(mask)
wc.recolor(color_func=image_colors)

# 显示词云
plt.imshow(wc, interpolation='bilinear')
plt.axis("off")
plt.show()

# 保存到文件
wc.to_file('wordcloud.png')
复制代码

参考

视频讲解课程

深度有趣(一)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
深度学习是一种机器学习的分支,通过模拟人脑神经网络的方式,对大量数据进行训练和学习,从而实现智能化的数据处理和决策。在GitHub上,有很多有趣深度学习应用。 首先,深度学习在图像识别方面的应用非常广泛。许多开源项目通过深度学习模型,可以实现图片分类、目标检测、人脸识别等能力。这些应用可以应用在各个领域,如安防监控、医学影像诊断等。 其次,自然语言处理也是深度学习的重要应用之一。通过深度学习模型,可以实现自动翻译、文本摘要、情感分析等任务。这些应用可以帮助人们更快速地理解和处理大量的文本信息。 另外,深度学习在音频处理领域也有有趣的应用。例如,通过深度学习模型可以实现语音识别、语音合成、音乐生成等功能。这些应用可以广泛运用在智能音箱、语音助手等设备上。 此外,深度学习还可以用于推荐系统和个性化推荐。通过对用户的历史行为和兴趣进行建模,深度学习模型可以为用户提供更加个性化的推荐服务,如商品推荐、新闻推荐等。 最后,深度学习还可以应用在金融领域。通过对金融数据的分析和预测,深度学习模型可以帮助投资者进行市场预测和风险控制,提高投资决策的准确性和效率。 总而言之,深度学习在GitHub上有许多有趣的应用,涵盖了图像识别、自然语言处理、音频处理、推荐系统以及金融等领域,为各行业带来了更加智能和高效的解决方案。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值