microsoftml.n_gram:nグラムを使ってテキストを特徴に変換します

Usage

microsoftml.n_gram(ngram_length: numbers.Real = 1,
    skip_length: numbers.Real = 0, all_lengths: bool = True,
    max_num_terms: list = [10000000], weighting: str = 'Tf')

Description

テキストからNGramを抽出し、辞書を使ってベクターに変換します。

引数

ngram_length

Nグラムの長さ(設定)。

skip_length

nグラム構築時にスキップすべき最大トークン数(設定)。

all_lengths

すべてのngramの長さをNgramLengthまで含めるか、NgramLengthのみを含めるか(設定)。

max_num_terms

辞書に格納できる最大nグラム数(設定)。

重み 付け

重み付け基準(設定)。

関連するコンテンツ

• microsoftml.n_gram_hash: ハッシュされた n-gram を使用してテキストを特徴に変換します
• microsoftml.featurize_text: テキスト列を数値特徴に変換