2022-02-05から1日間の記事一覧
色々ad hocで作業していたところ、記録せずにあれこれやっており、別のPCで作業をなぞろうとして失敗したので、改めて作業の記録。 東北大学のgithubをcloneして bert-japanese ができるが、tokenizerの訓練ステップで、 python train_tokenizer.py --input_…
色々ad hocで作業していたところ、記録せずにあれこれやっており、別のPCで作業をなぞろうとして失敗したので、改めて作業の記録。 東北大学のgithubをcloneして bert-japanese ができるが、tokenizerの訓練ステップで、 python train_tokenizer.py --input_…