【AI大模型】Transformers大模型库（一）：Tokenizer

2024-08-13 15:59:19 浏览数 (2)

一、引言

这里的Transformers指的是huggingface开发的大模型库，为huggingface上数以万计的预训练大模型提供预测、训练等服务。

模型数据自然语言处理编码工作

0 人点赞