tokenizing

UK
/ˈtəʊkənaɪzɪŋ/
US
/ˈtoʊkənaɪzɪŋ/

Переводы

tokenizeглагол

tokenizing

Герундий

tokenized
Прошедшее простое время
tokenized
Причастие прошедшего времени
tokenizing
Герундий
UK
/ˈtəʊkənaɪz/
US
/ˈtoʊkənaɪz/
токенизироватьКомпьютерный и финтех-термин; используется как для разбиения текста на токены, так и для замены чувствительных данных суррогатными токенами.
The software can tokenize the text for further analysis.
Программа может токенизировать текст для дальнейшего анализа.
Синонимы
tokenizeгерундий или причастие настоящего времени

tokenizing

Used attributively: "tokenizing filter", "tokenizing step".
токенизирующийТехнический термин; употребляется атрибутивно.
The tokenizing module runs first in the text-processing pipeline.
Токенизирующий модуль запускается первым в конвейере обработки текста.

Определения

tokenizeглагол
To break down text into smaller components, typically words or phrases, for processing in computational linguistics or natural language processing.
The software was designed to tokenize the input text before analyzing its syntax.
To substitute sensitive data, such as payment card numbers, with non-sensitive surrogate tokens for secure storage or transmission.
The gateway tokenizes credit card details before forwarding the transaction to the merchant.
tokenizeгерундий или причастие настоящего времени
Carrying out tokenization; converting data into tokens.
The tokenizing module runs first in the text-processing pipeline.