Частота слов

Вставьте текст и увидите, какие слова вы повторяете — с рейтингом, без кнопок.

Как пользоваться

  1. Вставьте текст в поле — рейтинг появляется по мере ввода, нажимать ничего не нужно.
  2. Переключите порядок сортировки, отключите фильтр служебных слов или игнорирование регистра; список обновляется сразу.
  3. Проверьте число слов и уникальных слов, затем скопируйте или скачайте всю таблицу (слово, количество, процент) как текст с табуляцией.

Пример

Ввод

Лиса бежит через лес. Лес шумит, лиса слушает.

Рейтинг

лес — 2 (25%)
лиса — 2 (25%)
бежит — 1 (12.5%)
слушает — 1 (12.5%)
шумит — 1 (12.5%)

Только правила по умолчанию: «Лиса» и «лиса» считаются одним словом и показываются в нижнем регистре; «через» скрыто как служебное, поэтому остаётся пять разных слов, а два слова с двумя вхождениями упорядочены по алфавиту (лес перед лиса). Проценты делятся на все 8 слов, включая скрытые, поэтому в сумме получается меньше 100%.

Правила, ограничения и известные проблемы

  • Слова берутся из собственной сегментации текста в браузере для языка страницы: апостроф остаётся внутри слова («don’t» — одно слово), дефис разделяет («well-known» — два), а последовательности цифр вроде «3.14» или «2026» считаются одним словом каждая.
  • Служебные слова по умолчанию скрыты. Список фиксированный, короткий и приведён здесь полностью (русские служебные слова): и, в, во, не, что, он, на, я, с, со, как, а, то, все, она, так, его, но, да, ты, к, у, же, вы, за, бы, по, только, ее, мне, было, вот, от, меня, еще, нет, о, из, ему, теперь, когда, даже, ну, вдруг, ли, если, уже, или, ни, быть, был, него, до, вас, нибудь, опять, уж, вам, ведь, там, потом, себя, ничего, ей, может, они, тут, где, есть, надо, ней, для, мы, тебя, их, чем, была, сам, чтоб, без, будто, чего, раз, тоже, себе, под, будет, ж, тогда, кто, этот, того, потому, этого, какой, совсем, ним, здесь, этом, один, почти, мой, тем, чтобы, нее, сейчас, были, куда, зачем, всех, никогда, можно, при, наконец, два, об, другой, хоть, после, над, больше, тот, через, эти, нас, про, всего, них, какая, много, разве, три, эту, моя, впрочем, хорошо, свою, этой, перед, иногда, лучше, чуть, том, нельзя, такой, им, более, всегда, конечно, всю, между. Снимите отметку, чтобы увидеть все слова.
  • Список служебных слов следует языку страницы, а не тексту: вставка английского текста на русскую страницу не скроет «the». Для английского текста переключитесь на английскую страницу.
  • Проценты всегда делятся на все подсчитанные слова, включая скрытые, поэтому при включённом фильтре показанные строки дают в сумме меньше 100%. Длина полосы — другое: она относительна самого частого слова и служит только для визуального сравнения.
  • Стемминга нет: «бежать», «бежит» и «бегущий» — три разных слова, а формы множественного числа никогда не объединяются. Фраз и n-грамм тоже нет.
  • Регистр складывается по правилам локали браузера, и нормализации Unicode нет: широкое «HELLO» и ASCII «hello» остаются разными, а «é» и «e» с комбинирующим знаком — разные слова.
  • Слова с одинаковым количеством упорядочиваются по сопоставлению языка страницы (русский — по алфавиту, китайский — по пиньиню, арабский — по арабскому алфавиту). Данные сопоставления берутся из браузера, поэтому другая версия ICU может расставить несколько слов чуть иначе.
  • Список отрисовывает не более 300 строк; копирование и скачивание всегда дают полный список. Свыше 200 000 символов результат обновляется примерно через 0,6 с после того, как вы закончите ввод, и текст никогда не обрезается.
  • Нет загрузки файлов и чтения PDF/DOCX, своего списка стоп-слов, облака слов, истории и ссылки для совместного доступа — всё выполняется в браузере, ничего не загружается и не сохраняется.

Что обычно нужно дальше, когда частые слова видны.