文章预览
transformers中使用BertTokenizer编码文本
2023年08月22日
496 字
使用BertTokenizer编码文本 ``` from transformers import BertTokenizer, BertModel tokenizer = BertTokenizer.from_pretrained('uer/chinese_roberta_L-2_H-128') model = BertModel.from_pret…
阅读全文
浏览
评论