Enter the word for search
tokenizing
UK
/ˈtəʊkənaɪzɪŋ/
US
/ˈtoʊkənaɪzɪŋ/
Phrases
We tokenize a corpus before training the language model.
Nous tokenisons un corpus avant d'entraîner le modèle de langage.
We tokenize comments to study user sentiment.
Nous tokenisons les commentaires pour étudier le sentiment des utilisateurs.
We need to tokenize data to analyze it more effectively.
Nous devons tokeniser les données pour les analyser plus efficacement.
We need to tokenize data to analyze it more effectively.
Nous devons tokeniser les données pour les analyser plus efficacement.
The function can tokenize documents to simplify search operations.
La fonction peut tokeniser des documents pour simplifier les opérations de recherche.
The system can tokenize documents for search indexing.
Le système peut tokeniser des documents pour l'indexation de recherche.
The system tokenizes emails before extracting key phrases.
Le système tokenise les e-mails avant d'extraire les expressions clés.
The tool can tokenize hashtags into meaningful parts.
L'outil peut découper les hashtags en jetons en éléments significatifs.
The script will tokenize input to ensure each word is processed individually.
Le script va tokeniser l'entrée afin de s'assurer que chaque mot est traité individuellement.
The script will tokenize input to ensure each word is processed individually.
Le script va tokeniser l'entrée afin de s'assurer que chaque mot est traité individuellement.
Researchers use this model to tokenize language more accurately.
Les chercheurs utilisent ce modèle pour tokeniser le langage plus précisément.
The script will tokenize paragraphs and split them into smaller units.
Le script va tokeniser des paragraphes et les diviser en unités plus petites.
Search engines tokenize queries to improve matching.
Les moteurs de recherche tokenisent les requêtes pour améliorer la correspondance.
The software can tokenize records and extract key fields.
Le logiciel peut tokeniser les enregistrements et extraire les champs clés.
The parser can tokenize sentences in several languages.
L'analyseur peut découper les phrases en unités lexicales dans plusieurs langues.
The parser can tokenize sentences in several languages.
L'analyseur peut découper les phrases en unités lexicales dans plusieurs langues.
Developers often tokenize strings to manipulate or analyze the contents.
Les développeurs tokenisent souvent des chaînes pour en manipuler ou en analyser le contenu.
You should tokenize strings before matching patterns.
Vous devriez tokeniser des chaînes de caractères avant de faire correspondre des motifs.
The software was designed to tokenize text for natural language processing.
Le logiciel a été conçu pour tokeniser du texte en vue du traitement du langage naturel.
The software was designed to tokenize text for natural language processing.
Le logiciel a été conçu pour tokeniser du texte en vue du traitement du langage naturel.