IT系のネタや知識をアウトプットしたかった

Knowledge-IO

「 月別アーカイブ:2020年06月 」 一覧

事前学習済みのBERTベクトルを取得する

  事前学習済みのBERTから、文のベクトルを抽出します。 今回は、Googleの多言語モデル(multilingual)を利用します。   まずはmultilingual mod …

【Python】Pickleで巨大データの読み込みを高速化する

  はじめに CSVファイルなどの巨大データを読み込む際、読み込みだけでなくパース処理なども行われるので、非常に時間がかかります。 Pythonでは、DataFrameやその他オブジェクトを …

OptunaでLightGBMのパラメータを自動でチューニングする

OptunaにLightGBMが組み込まれて、より簡単に利用できるようになったので試してみました。 (ちなみに、オプチューナーと読むのが正しいようです。) 基本的に、LightGBMのimport文を …

Copyright© Knowledge-IO , 2020 All Rights Reserved Powered by STINGER.