BpeDecoder.Decode(IEnumerable<String>) Metodo

Definizione

Decodificare il BPE originale unendo tutti i token e quindi sostituendo il suffisso usato per identificare la fine delle parole in base agli spazi vuoti.

public override string Decode(System.Collections.Generic.IEnumerable<string> tokens);
override this.Decode : seq<string> -> string
Public Overrides Function Decode (tokens As IEnumerable(Of String)) As String

Parametri

tokens
IEnumerable<String>

Elenco di token da unire.

Valori restituiti

Stringa contenente tutti i token uniti.

Si applica a