В больших статьях не ставятся метки

В больших статьях ( от 45000 т.с. без проб. ) почему-то метки не проставляются, нажимаю OK и окно закрывается.

Это уже не статья, а целая энциклопедия

Срабатывает защита парсера. Он просто не в состоянии обработать такие большие обьемы, потому даже не пытается.

К сожалению тут я ничего поделать не могу.

во 2 версии работало.

Скиньте мне пример вашего текста который во второй работал, а в третей не работает.

Посмотрел тексты - действительно, до перехода на юникод (до версии 3.5), программа справлялась с крупными текстами без проблем. Увеличил максимальный лимит текста, который программа будет пытаться обработать, так что теперь тексты в 200к символов она не пропускает, но скорость работы с такими текстами довольно маленькая. Связано это с тем, что юникодный набор символов имеет больше вариаций и программе сложнее определить какой текущий символ текста - часть слова или нет. С этим, к сожалению я ничего поделать не могу.

Позднее попробую упростить разбивку слов за основу взяв лишь самые популярные символы разделения слов (пробелы, запятые, точки и т.д.), а не всевозможные. Качество в таком случае может упасть, но скорость должна возрасти. Поэкспериментирую, а там будет видно пригодный это для жизни вариант или нет.

Со словарей метки ставятся, а с часто употребляемых слов - нет. :(

Со словарей поиск простой - есть слово в тексте или нет. Часто употребляемые - это выборка всех слов в тексте, группировка и определение самых частых. Согласитесь - намного трудоемкое задание. А в больших текстах количество слов огромное. Потому, чтобы программа не зависала на пол часа при обработке каждой статьи, я установил некий порог.