BpeTokenizer.Normalizer Eigenschaft
Definition
Wichtig
Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.
Ruft den vom Tokenizer verwendeten Normalizer ab.
public override Microsoft.ML.Tokenizers.Normalizer? Normalizer { get; }
member this.Normalizer : Microsoft.ML.Tokenizers.Normalizer
Public Overrides ReadOnly Property Normalizer As Normalizer