2750个通用停用词表整理,免费下载

news/2024/11/23 13:38:57/

中文停用词表下载

一共2750个停用词,属于通用停用词表。
下载地址:

链接:https://pan.baidu.com/s/1u-Ob86VGVSk3vhnwf2S29w

提取码:aoj4

停用词表整理代码

下载了很多网上的通用停用词表,同时合并了我们实验室的停用词表后使用下面的代码对停用词表整理:

import osdef readfile(path): # 读取文件夹下所有的文件files = os.listdir(path)file_list = []for file in files:  # 遍历文件夹if not os.path.isdir(file):file_list.append(path + '/' + file)return file_listdef combine_main():clean_words = []file_list = readfile('words') # 把所有的停用词表都放在words文件夹下for file in file_list:with open(file) as f:for word in f.readlines():# words is single wordif str(word) not in clean_words:clean_words.append(word)with open('clean_words.txt', 'a') as f:for word in clean_words:f.write(word)passcombine_main()

http://www.ppmy.cn/news/623388.html

相关文章

NLTK获取停用词

NLTK获取停用词 import nltk from nltk.corpus import stopwords stopset set(stopwords.words(english)){here, they, over, "youd", at, more, "doesnt", again, isn, once, your, their, will, having, nor, them, "thatll", the, "sh…

导致谷歌账号停用的原因

导致谷歌账号停用的原因,进来看看你属于哪一个 1、多设备短时间通过不同IP登录 通常google 只要检测到 3 个不同设备的 IP 不同,就会大概率账号异常或者直接停用,如果继续再次异地登陆一定停用。 2、关联IP异常被连累 通常一个IP短时间大量注册Googl…

计算机用户被停用,Win10电脑中Administrator账户被停用如何解决

如今很多用户都已经开始安装win10系统了,而在使用的过程中由于不熟悉经常会出现一些错误的操作导致出现一些问题,就有win10电脑用户不小心删除了本地管理员账户,然后系统内置的Administrator账户默认又是禁用的,所以开机都会提示A…

英文停用词列表

为了便于处理英文文档时,进行去停用词,现贴出常用的英文停用词: stoplist [very, ourselves, am, doesn, through, me, against, up, just, her, ours, couldn, because, is, isn, it, only, in, such, too, mustn, under, their, if, to, …

自然语言处理-停用词

[做一个搬运工,信息来自百度百科] 停用词      停用词是指在信息检索中,为节省存储空间和提高搜索效率,在处理自然语言数据(或文本)之前或之后会自动过滤掉某些字或词,这些字或词即被称为Stop Words…

中文停用词表和英文停用词表

最近在做一些基本的中英文NLP任务,其中在过滤掉文本中的特殊字符、对文本进行分词之后,要去除文本中的停用词,所以从网上找了两个中英文的停用词表,传到博客里方便以后使用。 中文分词列表链接:https://pan.baidu.com…

手机html己停用怎么办,iphone手机出现已停用请五分钟再试怎么办

iphone手机出现已停用请五分钟再试怎么办 当苹果手机出现了iphone已停用请五分钟再试怎么办呢,下面小编介绍一下。 具体如下: 1. 当解锁苹果手机时,连续输错了四次密码后,会出现1分钟后才能继续输入密码 2. 如果1分钟后,输入的密码还是错误的,那么手机将被锁定5分钟 3. 如…

android 停用应用的命令,免Root使用ADB命令_停用手机系统应用

菜鸟教程,老鸟勿喷! 对于未解锁的手机,总存在那么一些我们用不到,甚至看都不想看到的应用,但是没办法卸载,在这里提供一些禁用掉这些应用的方法供参考: 1. 开发者模式打开ADB调试 2. 连接电脑,在电脑上下载adb应用包,一般的一键刷写Recovery包都带有 3. 在adb.exe …