2022-02-05から1日間の記事一覧

改めて事前学習の前半部分 備忘録

色々ad hocで作業していたところ、記録せずにあれこれやっており、別のPCで作業をなぞろうとして失敗したので、改めて作業の記録。 東北大学のgithubをcloneして bert-japanese ができるが、tokenizerの訓練ステップで、 python train_tokenizer.py --input_…