「 月別アーカイブ：2020年06月 」 一覧
-
-
事前学習済みのBERTベクトルを取得する
2020/06/07 -IT系, 機械学習・ディープラーニング
事前学習済みのBERTから、文のベクトルを抽出します。 今回は、Googleの多言語モデル(multilingual)を利用します。 まずはmultilingual mod …
-
-
【Python】Pickleで巨大データの読み込みを高速化する
2020/06/06 -IT系, 機械学習・ディープラーニング
はじめに CSVファイルなどの巨大データを読み込む際、読み込みだけでなくパース処理なども行われるので、非常に時間がかかります。 Pythonでは、DataFrameやその他オブジェクトを …
-
-
OptunaでLightGBMのパラメータを自動でチューニングする
2020/06/06 -IT系, 機械学習・ディープラーニング
OptunaにLightGBMが組み込まれて、より簡単に利用できるようになったので試してみました。 (ちなみに、オプチューナーと読むのが正しいようです。) 基本的に、LightGBMのimport文を …