代码之家 › 专栏 › 技术社区 › Hooked

无趣词汇表

stop-words text-processing nlp

3

Hooked · 技术社区 · 16 年前

[注意]这不是一个直接的编程问题,但它是在语言处理中经常出现的问题,我相信它对社区有一定的用处。

有没有人有一个很好的清单 乏味的 (英语)那些被测试过的单词,更多的是一种随意的表情?这包括所有介词、连词等。可能有语义,但经常出现在 每一个 句子,不分主语。我不时地为个人项目建立自己的列表,但它们都是临时的;我不断地添加我在输入时忘记的单词。

2 回复 | 直到 15 年前

1

7

Greg Hewgill 16 年前

这些词通常被称为 stop words . 维基百科的文章包含了更多关于它们的信息,包括在哪里可以找到一些列表。

2

Mark Byers 16 年前

我想你是说 stop words .

Wikipedia上有一些指向停止语列表的链接,包括 this one .