Процесс токенизации

Translation процесс токенизации into english

Процесс токенизации данных помогает в анализе текста.

The process of tokenization of data helps in text analysis.