跳到正文
马克工具箱

词频统计(中英文分词)

粘贴一段文章、论文摘要、用户评论或问卷回答,自动分词并按出现次数排序,显示每个词的次数和占比,以及高频词的词云。可以统计两个词、三个词的固定搭配,忽略「的、了、the、of」这类虚词和数字,结果可以导出为 CSV 用 Excel 继续分析。

在浏览器本地运行,输入的内容和文件都不会上传

统计单位

使用步骤

  1. 把文字粘贴到输入框,或点「载入示例」看看效果。
  2. 选择按单词还是词组统计,设置最短长度和要忽略的内容。
  3. 在表格里查看排名,点「下载 CSV」导出全部结果。

参数说明

分词
使用浏览器内置的分词功能,中文、英文、日文混排都能切分。专业术语可能被拆成几个词,可以用「两词组合」统计把它们找回来。
词组统计
统计相邻两个或三个词的组合,适合找「自然语言处理」「machine learning」这类固定搭配,不跨越句子。
最短长度
中文建议设为 2 个字,过滤掉大量单字词;英文一般设为 1。

完整示例

以这段文字为例:

The cat sat on the mat. The cat ate the fish. Machine learning helps machine learning researchers; the cat sleeps.

摘要显示「共 20 个词,去重后 10 个」,因为 the、on 这样的停用词会被算作词,但随后被跳过。把「统计单位」设为「单词」时,排在前面的几行是:

词语 次数 占比
cat 3 21.43%
learning 2 14.29%
machine 2 14.29%

占比除以的是实际统计的 14 个词,而不是文本中的 20 个。选择「两词组合」时,machine learning 在 8 个词组中出现了两次(25%)。词组不会跨越句子或逗号的边界,以停用词开头或结尾的词组会被跳过。

页面列出前 100 行,「显示全部」会列出其余的行。「下载 CSV」包含每一行,列为 term、count 和 share。

常见问题

分词结果不准确怎么办?

浏览器的分词基于通用词典,新词、人名和专业术语可能被切开。可以改用两词、三词组合统计,或者把结果导出后在 Excel 里合并。

能处理多长的文字?

几十万字以内都可以流畅处理,更长的文本分成几段分别统计即可。

文字会上传吗?

不会,分词和统计都在浏览器里完成。

隐私说明

本工具完全在浏览器中运行,文件和文本都在你的设备上处理,不会上传到我们的服务器。

相关工具