Rubrique précédente: Fonctions pour le fractionnement de chaînesRubrique suivante: GetToken


SetTokenizerInput

La fonction SetTokenizerInput initialise le générateur de jetons à l'aide d'une chaîne et définit les délimiteurs pour fractionner la chaîne. Cette chaîne et les délimiteurs sont valides pour le reste du script jusqu'à ce que vous appeliez la fonction avec une autre chaîne ou un autre délimiteur.

Format de la fonction :

SetTokenizerInput(str as string, delimiters as string)

Paramètres d'entrée

Cette fonction présente les paramètres d'entrée suivants :

str

Spécifie la chaîne d'entrée que vous voulez fractionner.

Remarque : Vous pouvez uniquement spécifier une chaîne d'entrée à la fois.

delimiters

Spécifie l'ensemble des délimiteurs pour le fractionnement de la chaîne. Par défaut, les caractères d'espacement sont utilisés comme délimiteurs, mais vous pouvez spécifier tout autre ensemble de caractères. Par exemple, “.,/” crée des jetons pour chaque sous-chaîne de la liste séparée par un point, une virgule ou une barre oblique.

Valeurs de retour

Aucun