どん底から這い上がるまでの記録

どん底から這い上がりたいけど這い上がれない人がいろいろ書くブログ(主にプログラミング)

2018-08-17から1日間の記事一覧

日本語のテキストコーパスから辞書を作るライブラリを作りたい③

NLP

この記事は前回書いた記事の続きです。 www.pytry3g.com 前回はJapaneseTextEncoderに指定した品詞を辞書に加えないように改良しました。 今回は以下の4つの点をJapaneseTextEncoderに加えてみます。 データセットの用意 パディング(padding) ミニバッチ…