CodeGenTokenizer.SpecialTokens Eigenschaft

Definition

Namespace:: Microsoft.ML.Tokenizers

Assembly:: Microsoft.ML.Tokenizers.dll

Paket:: Microsoft.ML.Tokenizers v1.0.1

Paket:: Microsoft.ML.Tokenizers v0.22.0

Paket:: Microsoft.ML.Tokenizers v2.0.0-preview.1.25125.4

Quelle:: CodeGenTokenizer.cs

Quelle:: CodeGenTokenizer.cs

Quelle:: CodeGenTokenizer.cs

Wichtig

Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.

Ruft die hinzugefügten Token ab.

public System.Collections.Generic.IReadOnlyDictionary<string,int>? SpecialTokens { get; }

member this.SpecialTokens : System.Collections.Generic.IReadOnlyDictionary<string, int>

Public ReadOnly Property SpecialTokens As IReadOnlyDictionary(Of String, Integer)

Eigenschaftswert

IReadOnlyDictionary<String,Int32>

Gilt für: