基于 word2vec 使用 wiki 中文语料库实现词向量训练模型.zip下载

weixin_39821620 2023-02-11 11:30:09

基于 word2vec 使用 wiki 中文语料库实现词向量训练模型.zip , 相关下载链接：https://download.csdn.net/download/weixin_55771290/87399060?utm_source=bbsseo

...全文

13 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

基于 word2vec 使用 wiki 中文语料库实现词向量训练模型.zip

资源包含文件：设计报告word+源码本次设计选取wiki中文语料，并使用python完成Word2vec模型构建的实践过程，不包含原理部分，旨在一步一步的了解自然语言处理的基本方法和步骤。文章主要包含了开发环境准备、数据的获取、数据的预处理、模型构建和模型测试四大内容，对应的是实现模型构建的五个步骤。详细介绍参考：https://biyezuopin.blog.csdn.net/article/details/125516399

词向量 词向量_使用Python构建Wiki中文语料词向量模型示例

word2vec 训练得到的词向量文件，最近学nlp，可以直接使用

维基百科词向量 sgns.wiki.char.bz2解压后文件后缀名是.char, 可以通过一些方法得到.txt结尾的文件，有35万多个字词和符号，300维的向量表示。将词向量作为词嵌入层时需要加载全部的词向量到内存，如果计算机的内存不够大，会直接内存溢出。所以，截取8000，20000个词汇的词向量进行使用，在配置普遍的设备也能运行。该项目提供了100多个使用不同表示（密集和稀疏），上下文特征（单词，ngram，字符等）和语料库训练的中文单词向量（嵌入）。人们可以很容易地获得具有不同属性的预训练向量，并将它们用于下游任务。

下载资源悬赏专区

13,654

社区成员

12,574,394

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章