Partager via


ClassicTokenizer Classe

Définition

Générateur de jetons basé sur la grammaire qui convient pour le traitement de la plupart des documents en langue européenne. Ce générateur de jetons est implémenté à l’aide d’Apache Lucene.

public class ClassicTokenizer : Azure.Search.Documents.Indexes.Models.LexicalTokenizer
type ClassicTokenizer = class
    inherit LexicalTokenizer
Public Class ClassicTokenizer
Inherits LexicalTokenizer
Héritage
ClassicTokenizer

Constructeurs

ClassicTokenizer(String)

Initialise une nouvelle instance de ClassicTokenizer.

Propriétés

MaxTokenLength

Longueur maximale du jeton. La valeur par défaut est 255. Les jetons dépassant la longueur maximale sont fractionnés. La longueur maximale du jeton qui peut être utilisée est de 300 caractères.

Name

Nom du générateur de jetons. Il doit contenir uniquement des lettres, des chiffres, des espaces, des tirets ou des traits de soulignement. Il doit commencer et se terminer uniquement par des caractères alphanumériques, et ne doit pas dépasser 128 caractères.

(Hérité de LexicalTokenizer)

S’applique à