【NLP】from glove import Glove的使用、模型保存和加载

﹏ヽ暗。殇╰゛Y 2022-09-04 00:47 92阅读 0赞

# 1 引言 #

不要被stackflow的上的一个的回答所误导。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzkzNTY5Ng_size_16_color_FFFFFF_t_70]

# 2 使用方法举例 #

# 语料
    sentense = [['你', '是', '谁'], ['我', '是', '中国人']]
    corpus_model = Corpus()
    # 训练语料
    corpus_model.fit(sentense, window=10)
    # 保存语料
    corpus_model.save('corpus.model')
    # 架子语料
    corpus_model = Corpus.load('corpus.model')
    print('Dict size: %s' % len(corpus_model.dictionary))
    print('Collocations: %s' % corpus_model.matrix.nnz)
    # 训练词向量
    glove = Glove(no_components=100, learning_rate=0.05)
    glove.fit(corpus_model.matrix, epochs=2,
              no_threads=1, verbose=True)
    glove.add_dictionary(corpus_model.dictionary)
    # 保存glove模型
    glove.save('glove.model')
    
    # 加载glove模型
    model = Glove.load('glove.model')

Glove参数

*  no\_components：词向量维度
 *  learning\_rate：学习率

Gove.fit参数

*  corpus\_model.matrix ： 语料矩阵
 *  epochs=200 ：迭代次数
 *  no\_threads=4 ：多线程数
 *  verbose=True：是否打印日志

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzkzNTY5Ng_size_16_color_FFFFFF_t_70]: /images/20220829/97cb433ed1674384af3668ce060d4650.png

发表评论取消回复

表情：

评论列表（有 0 条评论，92人围观）

还没有评论，来说两句吧...

相关阅读

相关使用Glove对词进行向量化表示

%% md GloVe: 全局向量 %% 这些都是我们稍后将要使用的模块.在继续操作之前,请确保可以导入它们

心已赠人/ 2023年08月17日 17:44/ 0 赞/ 110 阅读

相关 GloVe推导

Global Vectors for Word Representation (GloVe) 对比之前的方法求词向量的两类主要方法： 1. 基于计数性的：共现

川长思鸟来/ 2023年07月25日 14:21/ 0 赞/ 5 阅读

相关 glove.840B.300d glove词向量词嵌入文件国内服务器下载

问题描述进行NLP处理时，需要下载glove 预训练的词向量。默认下载是从国外服务器获取数据，下载数度特别慢，几乎为0。解决方法 mxnet已经收集了stan

末蓝、/ 2023年02月25日 13:29/ 0 赞/ 9 阅读

相关 Tensorflow模型的保存和加载(一)

刚接触深度学习，Tensorflow模型的保存和加载尚不清楚，根据教程的翻译做一记录，不当之处敬请指正。原文地址：[http://cv-tricks.com/tensorf

约定不等于承诺〃/ 2022年11月25日 13:17/ 0 赞/ 252 阅读

相关保存和加载模型

本文档提供了有关 PyTorch 模型保存和加载的各种用例的解决方案。随意阅读整个文档，或者直接跳到所需用例所需的代码。在保存和加载模型时，需要熟悉三个核心功能： 1.

刺骨的言语ヽ痛彻心扉/ 2022年09月11日 00:29/ 0 赞/ 273 阅读

相关【NLP】from glove import Glove的使用、模型保存和加载

1 引言不要被stackflow的上的一个的回答所误导。 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shado

﹏ヽ暗。殇╰゛Y/ 2022年09月04日 00:47/ 0 赞/ 93 阅读

相关 Tensorflow模型保存和加载

翻译自：http://cv-tricks.com/tensorflow-tutorial/save-restore-tensorflow-models-quick-comple

蔚落/ 2022年05月29日 04:44/ 0 赞/ 413 阅读

相关 GloVe学习笔记

GloVe是一种用于获取词汇向量表示的无监督学习算法。对来自语料库的聚合全局字词同现统计进行训练，并且所得到的表示展示了词向量空间的有趣的线性子结构。官网主页地址：[ht

蔚落/ 2022年05月25日 23:06/ 0 赞/ 91 阅读

相关模型保存和加载

我们可以将训练后的模型保存下来，下次直接导出就行了，节省了时间。代码： from sklearn.datasets import load_boston

水深无声/ 2022年04月23日 03:22/ 0 赞/ 334 阅读

相关 Pytorch nn.Embedding用法（包括加载预训练模型，加载Word2vec,加载glove）

版权声明：我是小仙女转载要告诉小仙女哦 https://blog.csdn.net/qq\_40210472/article/details/88995433 py

左手的ㄟ右手/ 2022年01月29日 07:15/ 0 赞/ 821 阅读