BpeDecoder.Decode(IEnumerable<String>) Methode

Definition

Decodieren Sie das ursprüngliche BPE, indem Sie alle Token verknüpfen und dann das Suffix ersetzen, das zum Identifizieren von Wörtern durch Leerzeichen verwendet wird.

public override string Decode(System.Collections.Generic.IEnumerable<string> tokens);
override this.Decode : seq<string> -> string
Public Overrides Function Decode (tokens As IEnumerable(Of String)) As String

Parameter

tokens
IEnumerable<String>

Die Liste der zusammenzuführenden Token.

Gibt zurück

Die Zeichenfolge, die alle zusammengeführten Token enthält.

Gilt für: