Split Klasse

Definition

Dieser Split enthält das zugrunde liegende Geteilte Token sowie seine Offsets in der ursprünglichen Zeichenfolge. Diese Offsets befinden sich im original referenziellen Bereich. Sie enthält auch alle Token mit der aktuellen Unterbrechung verknüpften.

public sealed class Split : IEquatable<Microsoft.ML.Tokenizers.Split>
type Split = class
    interface IEquatable<Split>
Public NotInheritable Class Split
Implements IEquatable(Of Split)
Vererbung
Split
Implementiert

Konstruktoren

Name Beschreibung
Split(String, ValueTuple<Int32,Int32>)

Erstellen eines Split-Objekts mithilfe des Tokens und des Offsets

Eigenschaften

Name Beschreibung
Offset

Gibt die Offsetzuordnung zur ursprünglichen Zeichenfolge zurück.

TokenString

Ruft das zugrunde liegende geteilte Token ab. Jede SubString wird durch ein Token dargestellt, und am Ende tragen wir möglicherweise eine Menge SubString, die verschiedene Teile der ursprünglichen Eingabezeichenfolge darstellt.

Methoden

Name Beschreibung
Equals(Split)

Gibt an, ob das aktuelle Split -Objekt gleich einem anderen Split -Objekt ist.

Gilt für: