-
Englisch
-
Russisch
-
Deutsch
-
Französisch
-
Italian
-
Greek
-
Englisch
-
Russisch
-
Deutsch
-
Französisch
-
Italian
-
Greek
Tokenize
Übersetzung von "tokenize" ins Russisch
tokenize
Verb
UK
/ˈtəʊkənaɪz/
US
/ˈtoʊkənaɪz/
tokenized Präteritum
tokenized Partizip Perfekt
tokenizing Gerundium
Компьютерный и финтех-термин; используется как для разбиения текста на токены, так и для замены чувствительных данных суррогатными токенами.
The software can tokenize the text for further analysis.
Программа может токенизировать текст для дальнейшего анализа.
Definitionen
tokenize
Verb
UK
/ˈtəʊkənaɪz/
US
/ˈtoʊkənaɪz/
To break down text into smaller components, typically words or phrases, for processing in computational linguistics or natural language processing.
The software was designed to tokenize the input text before analyzing its syntax.
To substitute sensitive data, such as payment card numbers, with non-sensitive surrogate tokens for secure storage or transmission.
The gateway tokenizes credit card details before forwarding the transaction to the merchant.
Redewendungen und Phrasen
tokenize text
The software was designed to tokenize text for natural language processing.
разбить текст на токены
Программное обеспечение было разработано для того, чтобы разбивать текст на токены для обработки естественного языка.
tokenize data
We need to tokenize data to analyze it more effectively.
разбить данные на токены
Нам нужно разбить данные на токены для более эффективного анализа.
tokenize input
The script will tokenize input to ensure each word is processed individually.
разбить входные данные на токены
Скрипт разобьет входные данные на токены, чтобы каждый слово обрабатывалось отдельно.
tokenize string
Developers often tokenize strings to manipulate or analyze the contents.
разбить строку на токены
Разработчики часто разбивают строки на токены для манипуляции или анализа содержимого.
tokenize document
The function can tokenize documents to simplify search operations.
разбить документ на токены
Функция может разбивать документы на токены для упрощения поисковых операций.
tokenize sentences
The parser can tokenize sentences in several languages.
токенизировать предложения
Парсер может токенизировать предложения на нескольких языках.
tokenize a corpus
We tokenize a corpus before training the language model.
токенизировать корпус
Мы токенизируем корпус перед обучением языковой модели.
tokenize words
The library can tokenize words with high accuracy.
токенизировать слова
Библиотека может токенизировать слова с высокой точностью.
tokenize paragraphs
The script will tokenize paragraphs and split them into smaller units.
токенизировать абзацы
Скрипт будет токенизировать абзацы и разбивать их на более мелкие единицы.
tokenize queries
Search engines tokenize queries to improve matching.
разбивать запросы на токены
Поисковые системы разбивают запросы на токены, чтобы улучшить сопоставление.
tokenize tweets
The analyzer tokenizes tweets and removes noisy symbols.
токенизировать твиты
Анализатор токенизирует твиты и удаляет шумовые символы.
tokenize comments
We tokenize comments to study user sentiment.
токенизировать комментарии
Мы токенизируем комментарии, чтобы изучить настроение пользователей.
tokenize hashtags
The tool can tokenize hashtags into meaningful parts.
разбивать хэштеги на смысловые части
Инструмент может разбивать хэштеги на смысловые части.
tokenize URLs
The crawler tokenizes URLs for indexing.
разбивать URL-адреса на токены
Веб-краулер разбивает URL-адреса на токены для индексации.
tokenize emails
The system tokenizes emails before extracting key phrases.
разбивать электронные письма на токены
Система разбивает электронные письма на токены перед извлечением ключевых фраз.