使用GloVe训练自己的语料

这篇博客是一个教程，废话不多说，直接开始

1 语料的展示

因为我做的是dna数据所以这里和大家不一样。。。。。。。。。。。。。。。

2 下载官方代码

官方下载地址：GloVe（c语言版本）

3 修改文件

首先将源码上传到服务器
打开demo.sh
将前面的代码注释掉（如下图）
对应的将CORPUS修改为自己的语料名字，我的是words.txt (注意带上后缀)
到这里就大功告成了，接下来就是训练了。
输入 make
输入bash demo.sh

完事，vectors.txt就是我们要的词向量。

4 结果展示

这里可以看得出来结构和word2vec的还是很相似的，在第一行加上词的个数和维度就一样了。

使用GloVe训练自己的语料相关推荐

word2vec 训练中文wiki语料
前面一篇写了用gensim 训练word2vec 和glove各自的语料训练方式, 现在给出用word2vec来训练wiki中文语料的code 首先从wiki上下载wiki中文语料下载地址是htt ...
windows10 训练word2vec 中文语料
windows10 环境训练word2vec 中文语料参考这篇文章,但有自己体会概述本人是NLP中的菜鸟,喜欢这个领域,自己论文打算做这方面,训练word2vec是每一项NLP工作的基础内容. ...
word2vec训练维基中文语料
前期准备 1.语料: 维基中文语料 (下载地址:https://dumps.wikimedia.org/zhwiki/latest/zhwiki-latest-pages-articles.xml.b ...
python实现glove,gensim.word2vec模型训练实例
20210331 https://blog.csdn.net/sinat_26917383/article/details/83029140 glove实例 https://dumps.wikimed ...
Ubuntu下GloVe中文词向量模型训练
开启美好的九月最近在学习textCNN进行文本分类,然后随机生成向量构建embedding网络的分类效果不是很佳,便考虑训练Glove词向量来进行训练,整个过程还是有遇到一些问题,希望懂的旁友能来指 ...
Glove模型训练自己的中文数据集词向量详细步骤
首先,下载Glove项目资源: https://github.com/stanfordnlp/GloVe 注意1: 后续训练命令仅在服务器命令行界面有效,在本机命令行.anaconda prompt ...
训练GloVe中文词向量
准备语料准备好自己的语料,保存为txt,每行一个句子或一段话,注意要分好词. 准备源码从GitHub下载代码,https://github.com/stanfordnlp/GloVe 将语料cor ...
【Pytorch基础教程37】Glove词向量训练及TSNE可视化
note Glove模型目标:词的向量化表示,使得向量之间尽可能多蕴含语义和语法信息.首先基于语料库构建词的共现矩阵,然后基于共现矩阵和GloVe模型学习词向量. 对词向量计算相似度可以用cos相似度 ...
如何将训练好的Glove转换成word2vec
最近因为要找工作,所以疯狂赶工,所以学到了不少知识,有很多比较实用的小方法,是我在学习研究的过程中发现的,也有自己在网上找的时候也是花了不少功夫才解决的小问题比如这篇博文中所讲的如何导入网上提供的训练 ...

使用GloVe训练自己的语料

1 语料的展示

2 下载官方代码

3 修改文件

4 结果展示

使用GloVe训练自己的语料相关推荐

最新文章

热门文章