BpeDecoder Klasse
Definition
Wichtig
Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.
Ermöglicht das Decodieren von Original BPE durch Verknüpfen aller Token und das anschließende Ersetzen des Suffixes, das verwendet wird, um End-of-Words durch Leerzeichen zu identifizieren.
public sealed class BpeDecoder : Microsoft.ML.Tokenizers.TokenizerDecodertype BpeDecoder = class
inherit TokenizerDecoderPublic NotInheritable Class BpeDecoder
Inherits TokenizerDecoder- Vererbung
Konstruktoren
| Name | Beschreibung |
|---|---|
| BpeDecoder() |
Erstellen Sie ein neues Bpe-Decoderobjekt. |
| BpeDecoder(String) |
Erstellen Sie ein neues Bpe-Decoderobjekt. |
Methoden
| Name | Beschreibung |
|---|---|
| Decode(IEnumerable<String>) |
Decodieren Sie das ursprüngliche BPE, indem Sie alle Token verknüpfen und dann das Suffix ersetzen, das zum Identifizieren von Wörtern durch Leerzeichen verwendet wird. |