microsoftml.n_gram: Convierte texto en características usando n-gramas

Usage

microsoftml.n_gram(ngram_length: numbers.Real = 1,
    skip_length: numbers.Real = 0, all_lengths: bool = True,
    max_num_terms: list = [10000000], weighting: str = 'Tf')

Description

Extrae NGrams del texto y los convierte a vectores usando diccionario.

Argumentos

ngram_length

Longitud de Ngram (ajustes).

skip_length

Número máximo de tokens a saltar al construir un ngram (ajustes).

all_lengths

Si incluir todas las longitudes de ngram hasta NgramLength o solo NgramLength (ajustes).

max_num_terms

Número máximo de ngrams para almacenar en el diccionario (ajustes).

ponderación

Los criterios de ponderación (ajustes).

Contenido relacionado

• microsoftml.n_gram_hash: convierte el texto en características con de n-gramas hash
• microsoftml.featurize_text: convierte columnas de texto en características numéricas