gensim的word2vec的简单使用

2024-05-26 15:18
文章标签 简单 使用 word2vec gensim

本文主要是介绍gensim的word2vec的简单使用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

from gensim.models import Word2Vec as wtv
import jiebas1 = "刘新宇是一个自然语言处理算法工程师"
s2 = "他从事算法方面的工作很多年"
s3 = "刘新宇是一名非常资深的算法工程师"sentences = [jieba.lcut(s1),jieba.lcut(s2),jieba.lcut(s3)]
print(sentences)model = wtv(sentences,min_count=1)print("this is the summary of the model:")
print(model)words = list(model.wv.vocab)
print('this is the vocabulary for our corpus:')
print(words)print("the vector for the word singer:")
print(model['资深'])w1 = ['资深']
print(model.wv.most_similar(positive=w1,topn=5))

  结果:

[['刘新宇', '是', '一个', '自然语言', '处理', '算法', '工程师'], ['他', '从事', '算法', '方面', '的', '工作', '很多年'], ['刘新宇', '是', '一名', '非常', '资深', '的', '算法', '工程师']]
this is the summary of the model:
Word2Vec(vocab=16, size=100, alpha=0.025)
this is the vocabulary for our corpus:
['刘新宇', '是', '一个', '自然语言', '处理', '算法', '工程师', '他', '从事', '方面', '的', '工作', '很多年', '一名', '非常', '资深']
the vector for the word singer:
[-3.7734744e-03  2.6095781e-04 -3.1862229e-03  4.2619775e-03-4.5439765e-07 -1.8814839e-03 -1.9608627e-03 -4.3091276e-032.0104370e-03  2.4313631e-03  3.6958823e-04 -4.6373094e-03-3.8697310e-03 -1.3030261e-03  3.4550454e-03  3.6497047e-04-3.0894275e-03  2.7997990e-04  2.4094102e-03  3.7222090e-03-3.3406885e-03  3.8989806e-03 -1.9044009e-03 -1.2546520e-03-2.7420574e-03  1.9589183e-03  4.6422374e-03  2.2412005e-03-4.5687910e-03 -3.0045302e-03 -7.5545040e-04 -1.9913551e-03-5.4244912e-04  3.4368648e-03  3.1319596e-03  3.5465839e-034.0631965e-04 -8.0981071e-04 -4.5625023e-03  1.8198669e-03-2.3173515e-03  1.3505023e-03  4.2371401e-03  4.9272538e-03-2.1169472e-03  4.2408700e-03  3.7939013e-03 -1.9469961e-03-1.0268842e-03 -3.4248799e-03 -4.0382403e-03 -8.0300641e-04-4.3166843e-03  4.0071514e-03 -5.1711878e-04 -1.0944011e-03-9.2390249e-04 -2.0183630e-03 -1.1692114e-04  3.7988871e-033.0223508e-03 -2.7847637e-03 -2.0709957e-03 -3.2283876e-03-7.3188142e-04  6.4730411e-06  2.4504904e-03 -1.8213416e-03-7.2910590e-04 -3.1336993e-03 -2.1612353e-03  3.4241637e-039.4859622e-04 -1.1737887e-03 -4.3117562e-03 -2.7182067e-03-6.3206785e-04  3.5696046e-03 -2.9301932e-03  9.1675809e-041.7115782e-03  1.6887123e-03  4.1562999e-03  3.1984923e-032.4283223e-04  4.2053428e-03  2.4675422e-03  2.9653152e-034.8725074e-03  3.6773803e-03  3.8778691e-03  7.9092768e-043.6476396e-03 -1.1947335e-03 -2.0735445e-03  2.1955518e-03-1.3067436e-03 -2.5959394e-03  4.0679227e-04  7.9005008e-04]
[('工作', 0.1197129413485527), ('非常', 0.08151963353157043), ('一个', 0.061945877969264984), ('的', 0.05767860636115074), ('他', 0.03252919763326645)]
C:/Users/user/Desktop/pycharm_test/test_gensim.py:21: DeprecationWarning: Call to deprecated `__getitem__` (Method will be removed in 4.0.0, use self.wv.__getitem__() instead).print(model['资深'])

  Word2vec可调整的参数如下:

  def __init__(self, sentences=None, corpus_file=None, size=100, alpha=0.025, window=5, min_count=5,max_vocab_size=None, sample=1e-3, seed=1, workers=3, min_alpha=0.0001,sg=0, hs=0, negative=5, ns_exponent=0.75, cbow_mean=1, hashfxn=hash, iter=5, null_word=0,trim_rule=None, sorted_vocab=1, batch_words=MAX_WORDS_IN_BATCH, compute_loss=False, callbacks=(),max_final_vocab=None):

  

这篇关于gensim的word2vec的简单使用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/1004833

相关文章

Conda与Python venv虚拟环境的区别与使用方法详解

《Conda与Pythonvenv虚拟环境的区别与使用方法详解》随着Python社区的成长,虚拟环境的概念和技术也在不断发展,:本文主要介绍Conda与Pythonvenv虚拟环境的区别与使用... 目录前言一、Conda 与 python venv 的核心区别1. Conda 的特点2. Python v

Spring Boot中WebSocket常用使用方法详解

《SpringBoot中WebSocket常用使用方法详解》本文从WebSocket的基础概念出发,详细介绍了SpringBoot集成WebSocket的步骤,并重点讲解了常用的使用方法,包括简单消... 目录一、WebSocket基础概念1.1 什么是WebSocket1.2 WebSocket与HTTP

C#中Guid类使用小结

《C#中Guid类使用小结》本文主要介绍了C#中Guid类用于生成和操作128位的唯一标识符,用于数据库主键及分布式系统,支持通过NewGuid、Parse等方法生成,感兴趣的可以了解一下... 目录前言一、什么是 Guid二、生成 Guid1. 使用 Guid.NewGuid() 方法2. 从字符串创建

Python使用python-can实现合并BLF文件

《Python使用python-can实现合并BLF文件》python-can库是Python生态中专注于CAN总线通信与数据处理的强大工具,本文将使用python-can为BLF文件合并提供高效灵活... 目录一、python-can 库:CAN 数据处理的利器二、BLF 文件合并核心代码解析1. 基础合

Python使用OpenCV实现获取视频时长的小工具

《Python使用OpenCV实现获取视频时长的小工具》在处理视频数据时,获取视频的时长是一项常见且基础的需求,本文将详细介绍如何使用Python和OpenCV获取视频时长,并对每一行代码进行深入解析... 目录一、代码实现二、代码解析1. 导入 OpenCV 库2. 定义获取视频时长的函数3. 打开视频文

Spring IoC 容器的使用详解(最新整理)

《SpringIoC容器的使用详解(最新整理)》文章介绍了Spring框架中的应用分层思想与IoC容器原理,通过分层解耦业务逻辑、数据访问等模块,IoC容器利用@Component注解管理Bean... 目录1. 应用分层2. IoC 的介绍3. IoC 容器的使用3.1. bean 的存储3.2. 方法注

Python内置函数之classmethod函数使用详解

《Python内置函数之classmethod函数使用详解》:本文主要介绍Python内置函数之classmethod函数使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录1. 类方法定义与基本语法2. 类方法 vs 实例方法 vs 静态方法3. 核心特性与用法(1编程客

Linux中压缩、网络传输与系统监控工具的使用完整指南

《Linux中压缩、网络传输与系统监控工具的使用完整指南》在Linux系统管理中,压缩与传输工具是数据备份和远程协作的桥梁,而系统监控工具则是保障服务器稳定运行的眼睛,下面小编就来和大家详细介绍一下它... 目录引言一、压缩与解压:数据存储与传输的优化核心1. zip/unzip:通用压缩格式的便捷操作2.

使用Python实现可恢复式多线程下载器

《使用Python实现可恢复式多线程下载器》在数字时代,大文件下载已成为日常操作,本文将手把手教你用Python打造专业级下载器,实现断点续传,多线程加速,速度限制等功能,感兴趣的小伙伴可以了解下... 目录一、智能续传:从崩溃边缘抢救进度二、多线程加速:榨干网络带宽三、速度控制:做网络的好邻居四、终端交互

Python中注释使用方法举例详解

《Python中注释使用方法举例详解》在Python编程语言中注释是必不可少的一部分,它有助于提高代码的可读性和维护性,:本文主要介绍Python中注释使用方法的相关资料,需要的朋友可以参考下... 目录一、前言二、什么是注释?示例:三、单行注释语法:以 China编程# 开头,后面的内容为注释内容示例:示例:四