詞頻統計
貼上文本,立刻看到哪些詞被重複最多——按詞或按字,不用點按鈕。
詞頻
怎麼用
- 把文本貼上進輸入框——排行隨輸入即時出現,不需要點任何按鈕。
- 按需要切換「按頻次 / 按拼音」、關掉「隱藏虛詞」,或切到「按單字」;列表立即更新。
- 看「詞數 / 不同」核對規模,然後複製或下載整張表(詞、次數、佔比,定位字元分隔)。
示例
輸入
今天天氣很好,我們去公園散步。今天公園裡人很多,天氣也不錯。
詞頻排行
公園 — 2 (13.3%) 今天 — 2 (13.3%) 天氣 — 2 (13.3%) 不錯 — 1 (6.7%) 很多 — 1 (6.7%) 很好 — 1 (6.7%) 裡 — 1 (6.7%) 去 — 1 (6.7%) 人 — 1 (6.7%) 散步 — 1 (6.7%)
中文沒有空格,詞由瀏覽器分詞給出(估算):公園、今天、天氣各 2 次,按拼音排(公園 gōngyuán < 今天 jīntiān < 天氣 tiānqì);「我們」「也」被虛詞表隱藏。佔比的分母是全部 15 個詞(含被隱藏的詞),所以各行相加不到 100%。切到「按單字」後第一位是「天」(4 次)。
口徑、侷限與已知問題
- 分詞來自瀏覽器內建的分詞詞典(`Intl.Segmenter`):中文按詞切分是估算結果,不同瀏覽器版本可能把「很好」拆成「很 / 好」。需要詞典級分詞、詞性標註或自定義詞典時,請用專業文本分析工具。
- 虛詞預設隱藏,詞表固定且在此全文公開(68 箇中文虛詞):的, 地, 得, 了, 著, 過, 是, 在, 和, 與, 及, 或, 而, 就, 也, 都, 很, 還, 又, 再, 才, 只, 被, 把, 讓, 從, 到, 於, 對, 為, 以, 之, 其, 這, 那, 有, 不, 沒, 我, 你, 他, 她, 它, 我們, 你們, 他們, 這個, 那個, 什麼, 怎麼, 因為, 所以, 但是, 如果, 可以, 已經, 還是, 只是, 這樣, 那樣, 時候, 自己, 以及, 還有, 就是, 不是, 一個, 一些。取消勾選即可顯示全部詞。
- 虛詞表跟頁面語言繫結,不跟文本語言繫結:在中文頁貼上英文,`the` 不會被中文詞表過濾。統計英文請切到英文頁。
- 佔比的分母永遠是全部詞(含被隱藏的虛詞),所以開啟過濾後各行相加小於 100%;條形長度是另一回事——它相對最高頻詞,只用於視覺對比。
- 不做詞幹化與詞形合併:`跑 / 跑了 / 跑過` 是三個詞;也不做片語、bigram 或 n-gram(`文本分析` 不會切出「本分」這類跨詞偽詞)。
- 不做 Unicode 規範化:全形「hello」與半形「hello」是兩個詞條;字母與數字的大小寫摺疊走瀏覽器 locale(土耳其語 `I/İ` 也會按 locale 處理)。
- 按單字只數漢字、平假名與片假名:字母、數字、標點、emoji 都不計入。
- 同頻詞按頁面語言的排序規則排列(中文拼音、英文 A–Z、阿語字母表);排序資料來自瀏覽器,不同 ICU 版本可能有細微差異。
- 列表最多渲染 300 行,複製與下載始終是完整列表。超過 20 萬字符時,停止輸入約 0.6 秒後更新,文本不會被截斷。
- 不支援上傳檔案或解析 PDF/Word、自定義虛詞表、詞雲圖、歷史記錄與分享連結;全部在瀏覽器本地完成,輸入不上傳、不儲存。
相關文本工具
看清高頻詞之後,通常還要做的事。