停用词是指在自然语言处理中用来过滤掉的词,通常是一些常见的词汇或功能词,如介词、连词、代词等,因为这些词通常对于文本的意义没有什么贡献,而且过多地出现会对统计词频造成干扰。 例如,在英文中的停用词包括:a, an, and, but, or, as, at, by, for, in, of, on, the, to 等。
停用词是什么
最新推荐文章于 2023-04-14 15:57:00 发布
停用词是指在自然语言处理中用来过滤掉的词,通常是一些常见的词汇或功能词,如介词、连词、代词等,因为这些词通常对于文本的意义没有什么贡献,而且过多地出现会对统计词频造成干扰。 例如,在英文中的停用词包括:a, an, and, but, or, as, at, by, for, in, of, on, the, to 等。