中文词频统计及词云制作

妖狐艹你老母 2022-01-07 23:27 637阅读 0赞

1.中软国际华南区技术总监曾老师还会来上两次课，同学们希望曾老师讲些什么内容？（认真想一想回答）

希望老师能讲讲更多关于python的知识，并且讲讲大数据的的另一些方向

2.中文分词

a。下载一中文长篇小说，并转换成UTF-8编码。

![1231849-20170925172845073-660206133.png][]

b.使用jieba库，进行中文词频统计，输出TOP20的词及出现次数。

import jieba
    ff=open('wdqk.txt','r',encoding='utf-8')
    wdqk=ff.read()
    for i in ',.""?!，。？！“”\n':
        wdqk=wdqk.replace(i,' ')
    wdqk=list(jieba.cut(wdqk))
    zd={}
    paichu={
        '我','的','心','好','冷','在','有','了','浩','然',}
    key=set(wdqk)-paichu
    for i in key:
        zd[i]=wdqk.count(i)
    lb=list(zd.items())
    lb.sort(key=lambda x:x[1],reverse=True)
    print('频率最高top10：\n')
    for i in range(10):
        print(lb[i])
    ff.close()

Building prefix dict from the default dictionary ...  
Loading model from cache C:\\Users\\ADMINI~1\\AppData\\Local\\Temp\\jieba.cache  
Loading model cost 0.723 seconds.  
Prefix dict has been built succesfully.  
我            575  
的          413  
心 375  
好 286  
冷 251  
在          198  
有          155  
了          135  
浩          124  
然          113

转载于:https://www.cnblogs.com/hzlhzl/p/7592940.html

[1231849-20170925172845073-660206133.png]: /images/20211220/24bf97b8f26b4fd9b9c63980cf7c5388.png

发表评论取消回复

表情：

评论列表（有 0 条评论，637人围观）

还没有评论，来说两句吧...

相关阅读

相关基于java实现的分词以及词频统计，准备制作词云数据

需求是统计一篇文章、一段话中各种词汇出现的次数，比如有一篇文章如下：[为维护人民健康提供有力保障][Link 1]，希望统计文章中的高频词，如下结果 ![在这里插入图片描述

素颜马尾好姑娘i/ 2023年10月06日 10:36/ 0 赞/ 10 阅读

相关【舆情分析（3）】中文分词、词性标注、词频统计及可视化词云输出一步到位

1. 模块安装 Echarts.js是一个由百度开源的基于JavaScript的数据可视化工具库，凭借着良好的交互性，精巧的图表设计，得到了众多开发者的认可。而 Pyth

深藏阁楼爱情的钟/ 2023年07月18日 03:28/ 0 赞/ 8 阅读

相关 python统计搜狗实验室新闻词频绘制词云

1.下载数据数据下载地址 https://www.sogou.com/labs/resource/ca.php ![在这里插入图片描述][watermark_typ

梦里梦外;/ 2023年06月07日 08:08/ 0 赞/ 10 阅读

相关 python3生成词云，制作词云

接上篇，继续帮着搞了个词云，也是作业，顺手一发。相关数据我也传一下，这是近五年的类型的词云，简介啥的也是同理。那个字体文件就自己找吧，没法放文件。 import

淡淡的烟草味﹌/ 2022年12月29日 09:55/ 0 赞/ 235 阅读

相关 wordcloud词云分析及词频统计绘图

!/usr/bin/env python -- coding: utf-8 -- @Date : 2017-10-18 17:52:25

阳光穿透心脏的1/2处/ 2022年06月07日 13:57/ 0 赞/ 266 阅读

相关【C语言】中文文本文件之词频统计

文章目录【C语言】中文文本文件之词频统计一、前言二、代码实现一 2.1 源码

叁歲伎倆/ 2022年03月12日 10:42/ 0 赞/ 349 阅读

相关中文词频统计

中文词频统计 -------------------- 这个作业的要求来自于：[https://edu.cnblogs.com/campus/gzcc/GZCC-16

小鱼儿/ 2022年01月12日 13:23/ 0 赞/ 402 阅读

相关中文词频统计及词云制作

1.中软国际华南区技术总监曾老师还会来上两次课，同学们希望曾老师讲些什么内容？（认真想一想回答）希望老师能讲讲更多关于python的知识，并且讲讲大数据的的另一些方向

妖狐艹你老母/ 2022年01月07日 23:27/ 0 赞/ 638 阅读

相关中文词频统计

本次作业的要求来自于：[https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2773][https_edu.cnbl

浅浅的花香味﹌/ 2021年12月20日 20:39/ 0 赞/ 330 阅读

相关中文词频统计

作业要求来自： [https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2773][https_edu.cnblogs

柔光的暖阳◎/ 2021年12月17日 08:37/ 0 赞/ 279 阅读