博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
文本处理之可视化wordcloud
阅读量:4577 次
发布时间:2019-06-08

本文共 1715 字,大约阅读时间需要 5 分钟。

 

  • 什么是词云
词云又叫文字云,是对文本数据中出现频率较高的“关键词”在视觉上的突出呈现,形成关键词的渲染形成类似云一样的彩色图片,从而一眼就可以领略文本数据的主要表达意思。
  • 准备工作:

python开发环境、wordcloud、jieba、matplotlib、numpy 、PIL 等库文件安装好。

    • pip 安装方法:

      1. pip install xxx
      2. 使用idea 直接安装

      wordcloud生成词云的原理简介 

      wordcloud生成词云的原理其实并不复杂,大体分成5步(具体可自行查看源码):

      1.wordcloud制作词云时,首先要对对文本数据进行分词,使用process_text()方法,这一步的主要任务是去除停用词 

      2.第二步是计算每个词在文本中出现的频率,生成一个哈希表。词频用于确定一个词的重要性 
      3.根据词频的数值按比例生成一个图片的布局,类IntegralOccupancyMap 是该词云的算法所在,是词云的数据可视化方式的核心。生成词的颜色、位置、方向等 
      4.最后将词按对应的词频在词云布局图上生成图片,核心方法是generate_from_frequencies,不论是generate()还是generate_from_text()都最终用到generate_from_frequencies 
      完成词云上各词的着色,默认是随机着色 
      5.词语的各种增强功能大都可以通过wordcloud的构造函数实现,里面提供了22个参数,还可以自行扩展。

  • demo:
# coding:utf-8import matplotlib.pyplot as pltfrom wordcloud import WordCloud, ImageColorGenerator, STOPWORDSimport jiebaimport numpy as npfrom PIL import Image# 读入背景图片abel_mask = np.array(Image.open("/home/djh/PycharmProjects/source/test.jpg"))# 读取要生成词云的文件text_from_file_with_apath = open('/home/djh/PycharmProjects/source/a.txt').read()# 通过jieba分词进行分词并通过空格分隔wordlist_after_jieba = jieba.cut(text_from_file_with_apath, cut_all=True)wl_space_split = " ".join(wordlist_after_jieba)# my_wordcloud = WordCloud().generate(wl_space_split) 默认构造函数my_wordcloud = WordCloud(	background_color='white',  # 设置背景颜色	mask=abel_mask,  # 设置背景图片	max_words=200,  # 设置最大现实的字数	stopwords=STOPWORDS,  # 设置停用词	font_path='/home/djh/win_font/simkai.ttf',  # 设置字体格式,如不设置显示不了中文	max_font_size=50,  # 设置字体最大值	random_state=30,  # 设置有多少种随机生成状态,即有多少种配色方案	scale=.5).generate(wl_space_split)# 根据图片生成词云颜色image_colors = ImageColorGenerator(abel_mask)# my_wordcloud.recolor(color_func=image_colors)# 以下代码显示图片plt.imshow(my_wordcloud)plt.axis("off")plt.show()

  

转载于:https://www.cnblogs.com/jasonhaven/p/7596799.html

你可能感兴趣的文章
关于 Failed to establish a new connection: [Errno 11004] getaddrinfo failed',))的问题
查看>>
JavaScript中严格判断NaN
查看>>
json_encode不自动转义斜杠“/”的方法
查看>>
CentOS 7安装PHP依赖管理Composer以及指定PHP版本使用Composer
查看>>
循序渐进大型网站架构
查看>>
Nodejs+Express 搭建 web应用
查看>>
2013春节出游兴“专机游”
查看>>
mysql 创建用户名及密码
查看>>
五 搭建kafka集群
查看>>
Linux 内核即插即用规范
查看>>
【规范】javascript 变量命名规则
查看>>
数据适配 DataAdapter对象
查看>>
有序列表ol和定义列表dl,dt,dd
查看>>
联想小新Air 15 安装黑苹果macOS High Sierra 10.13.6过程
查看>>
公共POI导出Excel方法–java
查看>>
次短路——Dijkstra
查看>>
C++ compile issue
查看>>
安卓中的shape
查看>>
站立会议总结08
查看>>
C++ stat判断路径是文件还是目录
查看>>