Tokenizer Costruttori
Definizione
Importante
Alcune informazioni sono relative alla release non definitiva del prodotto, che potrebbe subire modifiche significative prima della release definitiva. Microsoft non riconosce alcuna garanzia, espressa o implicita, in merito alle informazioni qui fornite.
Overload
| Nome | Descrizione |
|---|---|
| Tokenizer() |
Inizializza una nuova istanza della classe Tokenizer. |
| Tokenizer(Model, PreTokenizer, Normalizer) |
Creare un nuovo oggetto Tokenizer. |
Tokenizer()
- Origine:
- Tokenizer.cs
- Origine:
- Tokenizer.cs
- Origine:
- Tokenizer.cs
Inizializza una nuova istanza della classe Tokenizer.
protected Tokenizer();Protected Sub New ()Si applica a
Tokenizer(Model, PreTokenizer, Normalizer)
Creare un nuovo oggetto Tokenizer.
public Tokenizer(Microsoft.ML.Tokenizers.Model model, Microsoft.ML.Tokenizers.PreTokenizer? preTokenizer = default, Microsoft.ML.Tokenizers.Normalizer? normalizer = default);new Microsoft.ML.Tokenizers.Tokenizer : Microsoft.ML.Tokenizers.Model * Microsoft.ML.Tokenizers.PreTokenizer * Microsoft.ML.Tokenizers.Normalizer -> Microsoft.ML.Tokenizers.TokenizerPublic Sub New (model As Model, Optional preTokenizer As PreTokenizer = Nothing, Optional normalizer As Normalizer = Nothing)Parametri
- model
- Model
Modello in uso dal tokenizer.
- preTokenizer
- PreTokenizer
PreTokenizer facoltativo in uso da Tokenizer. WhiteSpace PreTokenizer verrà usato se questo parametro è null.
- normalizer
- Normalizer
Normalizzatore facoltativo in uso dal tokenizer.