Python 替换同义词（jieba 实现）

叁歲伎倆 2023-08-17 15:30 125阅读 0赞

输入：

年假到底放几天？

期望输出：

年休假究竟放几天？

**1. 同义词 synonymWords文件格式：**

每行第一列为期望词，后几个为待替换的同义词。词和词之间用 tab 键分隔。

年休假	年假	年休
    究竟	到底

**2. Python 实现代码：**

# encoding=utf-8
    import jieba
    
    
    def replaceSynonymWords(string1):
        # 1读取同义词表，并生成一个字典。
        combine_dict = {}
        # synonymWords.txt是同义词表，每行是一系列同义词，用tab分割
        for line in open("synonymWords.txt", "r", encoding='utf-8'):
            seperate_word = line.strip().split("\t")
            num = len(seperate_word)
            for i in range(1, num):
                combine_dict[seperate_word[i]] = seperate_word[0]
    
        # 2提升某些词的词频，使其能够被jieba识别出来
        jieba.suggest_freq("年假", tune=True)
    
        # 3将语句切分成单词
        seg_list = jieba.cut(string1, cut_all=False)
        f = "/".join(seg_list).encode("utf-8")
        f = f.decode("utf-8")
    
    
        # 4返回同义词替换后的句子
        final_sentence = " "
        for word in f.split('/'):
            if word in combine_dict:
                word = combine_dict[word]
                final_sentence += word
            else:
                final_sentence += word
        # print final_sentence
        return final_sentence
    
    
    string1 = '年假到底放几天？'
    print(replaceSynonymWords(string1))

发表评论取消回复

表情：

评论列表（有 0 条评论，125人围观）

还没有评论，来说两句吧...

相关阅读

相关【Python篇】python库讲解（wordcloud | jieba）

在技术的道路上，我们不断探索、不断前行，不断面对挑战、不断突破自我。这里通过WordCloud类创建一个词云对象，传入参数包括蒙版（mask）、字体路径（font_pat...

傷城~/ 2024年04月17日 06:39/ 0 赞/ 75 阅读

相关 Python中的jieba入门

目录 Python中的jieba入门介绍安装分词方法精确模式全模式搜索引擎模式添加自定义词典关键词提取结论实例：文本情感分析场景描

约定不等于承诺〃/ 2024年02月21日 10:22/ 0 赞/ 90 阅读

相关 Python 替换同义词（jieba 实现）

输入：年假到底放几天？期望输出：年休假究竟放几天？ 1. 同义词 synonymWords文件格式：每行第一列为期望词，后几个为待替换的同义词

叁歲伎倆/ 2023年08月17日 15:30/ 0 赞/ 126 阅读

相关【Python】jieba库的使用

![format_png][] ![format_png 1][] ![format_png 2][] ![format_png 3][] ![format_png 4

我就是我/ 2023年07月25日 09:19/ 0 赞/ 128 阅读

相关 nltk 同义词替换单词拼写校正制作伪原创文章

一.基于贝叶斯单词拼写校正 -- coding: utf-8 -- @Time : 2019/11/26 10:13 @Author :

╰半夏微凉°/ 2023年06月20日 09:25/ 0 赞/ 18 阅读

相关 python3利用jieba分词

`没有人一开始就能想清楚，只有做起来，目标才会越来越清楚。——马克·扎克伯格` 下载`jieba` pip3 install jieba ![在这里插入图

迷南。/ 2023年02月19日 09:29/ 0 赞/ 14 阅读

相关 Python文本分析 jieba

Python文本分析 1. jieba.analyse.extract\_tags()提取句子级的关键字 2. 提取关键字 3. 分词介绍 4. 统计中文词频 ji

àì夳堔傛蜴生んèń/ 2023年01月19日 03:27/ 0 赞/ 237 阅读

相关 rasa实现同义词替换

说明 rasa支持意图识别后，自动替换近义词，官网说明：[https://rasa.com/docs/rasa/components\entitysynonymmappe

怼烎@/ 2022年09月05日 01:42/ 0 赞/ 27 阅读

相关 Python中文分词组件 jieba

jieba "结巴"中文分词：做最好的Python中文分词组件 "Jieba" Feature 支持三种分词模式：精确模式，试图将

柔光的暖阳◎/ 2022年07月29日 09:28/ 0 赞/ 288 阅读

相关 python 简单实现jieba库分词制作词云

准备工作： python版本：python 2 ide：pycharm2018 pip 安装 jieba ， wordcloud ，matplotlib \保存至脚

落日映苍穹つ/ 2022年03月21日 08:18/ 0 赞/ 283 阅读