korean:mecab:python_mk_tfidf

差分

このページの2つのバージョン間の差分を表示します。

この比較画面へのリンク

--- korean:mecab:python_mk_tfidf [2021/11/11 23:48] – [TF-IDFの計算と上位10語の表示] yoshi
+++ korean:mecab:python_mk_tfidf [2026/03/16 23:03] (現在) – yoshi
@@ 行 93: / 行 93: @@
 <code python>
 # モデルを作成
-vectorizer = TfidfVectorizer(smooth_idf=False, token_pattern='(?u)[\\w\\ue0bc-\\uefff\\uf1000-\\uf66e\\uf784-\\uf800\\uf806-\\uf864\\uf86a-\\uf8f7]+')
+vectorizer = TfidfVectorizer(smooth_idf=False, token_pattern='(?u)[\\w\\ue0bc-\\uefff\\uf100-\\uf66e\\uf784-\\uf800\\uf806-\\uf864\\uf86a-\\uf8f7]+')
 values = vectorizer.fit_transform(docs).toarray()
 feature_names = vectorizer.get_feature_names_out()
@@ 行 186: / 行 186: @@
 取得したデータをMeCabで処理しながら，その結果を利用するということが多いかと思いますが，既に出力結果がある場合，また出力結果を修正した正解ファイルがある場合も，簡単に処理することができます．形態素解析の結果には誤りも含まれることがあるため，正解ファイルを利用する，ということもニーズがあると思われます．
-{{indexmenu_n>206}}
+{{indexmenu_n>223}}

korean/mecab/python_mk_tfidf.1636642096.txt.gz · 最終更新: 2021/11/11 23:48 by yoshi