English translation is not available yet. Showing Russian content.
nltk.word_tokenize
nltk.word_tokenize
Определение
nltk.word_tokenize — функция из библиотеки NLTK, которая разбивает текст на токены (слова, знаки препинания) с учётом правил английского языка.