Tokenizer.PreTokenizer Eigenschaft

Definition

Namespace:: Microsoft.ML.Tokenizers

Assembly:: Microsoft.ML.Tokenizers.dll

Paket:: Microsoft.ML.Tokenizers v1.0.1

Paket:: Microsoft.ML.Tokenizers v0.20.1

Paket:: Microsoft.ML.Tokenizers v0.22.0

Paket:: Microsoft.ML.Tokenizers v2.0.0-preview.1.25125.4

Quelle:: Tokenizer.cs

Quelle:: Tokenizer.cs

Quelle:: Tokenizer.cs

Wichtig

Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.

Ruft das vom Tokenizer verwendete PreTokenizer ab.

public virtual Microsoft.ML.Tokenizers.PreTokenizer? PreTokenizer { get; }

public Microsoft.ML.Tokenizers.PreTokenizer PreTokenizer { get; set; }

member this.PreTokenizer : Microsoft.ML.Tokenizers.PreTokenizer

member this.PreTokenizer : Microsoft.ML.Tokenizers.PreTokenizer with get, set

Public Overridable ReadOnly Property PreTokenizer As PreTokenizer

Public Property PreTokenizer As PreTokenizer

Eigenschaftswert

PreTokenizer

Gilt für: